筆記本很好,但 REPL 有時更有用。我是否能夠以某種方式運行在 Databricks 上執行的 spark-shell?喜歡:
spark-shell --master https://adb-5022.2.azuredatabricks.net/
我查看了與 Databricks 相關的可用工具(databricks connect、dbx、...),但似乎沒有這樣的功能。
uj5u.com熱心網友回復:
如果您想從 Databricks 集群中的本地計算機執行代碼, Databricks connect是您需要的工具。與 相同spark-shell,驅動程式將在您的本地計算機上,并且執行程式被洗掉。該databricks-connect軟體包安裝了 Apache Spark 的修改發行版,因此您可以使用、、、spark-shell等pyspark-spark-submit只需確保該目錄位于PATH.
PS,但我真的不明白為什么筆記本電腦不適合你——spark-shell與它們相比沒有任何優越的功能。
轉載請註明出處,本文鏈接:https://www.uj5u.com/caozuo/491792.html
下一篇:在泛型類中使用泛型介面
