Warm tip: This article is reproduced from serverfault.com, please click

python 3.x-有没有办法在Databricks上测试我的Pyspark笔记本

(python 3.x - Is there way to test my Pyspark notebooks on Databricks)

发布于 2020-11-25 13:43:03

我正在研究数据块,并想测试我在笔记本中定义的通用功能,最好的方法是什么?预先感谢你的协助👊🏿

Questioner
Johan Khanye
Viewed
0
CHEEKATLAPRADEEP-MSFT 2020-12-02 17:04:01

你可以使用databricks-connect:Databricks Connect允许你将自己喜欢的IDE(IntelliJ,Eclipse,PyCharm,RStudio,Visual Studio),笔记本服务器(Zeppelin,Jupyter)和其他自定义应用程序连接到Databricks集群并运行Apache Spark代码。

使用databricks-connect,你可以将自己喜欢的IDE连接到Databricks集群。这意味着你现在可以更轻松地链接,测试和打包要在Databricks上运行的代码。

有关更多详细信息,请参阅Databricks笔记本中的“测试代码”