Som
2020-08-31 10:59
您不能在数据块上使用Spark目录API吗？请尝试这个-
val tuples: Map[String, String] = spark.catalog.listDatabases().collect().flatMap(db =>
spark.catalog.listTables(db.name).collect().map(x => (db.name, x.name))
).toMap
热门帖子
相关问题
热门github
1
2
3
5
6
7
8
11
13
14
15
Mamba is a new state space model architecture showing promising performance on information-dense data such as language modeling, where previous subquadratic models fall short of Transformers. It is based on the line of progress on structured state space models, with an efficient hardware-aware design and implementation in the spirit of FlashAttention.
(翻译：Mamba 是一种新的状态空间模型架构，在信息密集型数据（例如语言建模）上显示出良好的性能，而之前的二次模型在 Transformers 方面存在不足。它基于结构化状态空间模型的进展，并本着FlashAttention的精神进行高效的硬件感知设计和实现。)
看起来它先提取所有数据然后进行过滤。我目前正在用Java做某事。我希望有一种方法可以在sql中执行此操作。
这里没有表达式可以从数据库中提取数据。我们只是提取元数据
@Som能否用Python提供相同的代码？