想遠程除錯下spark-shell,在spark-class中添加遠程除錯引數

啟動之后會報錯

但是在不加這個除錯引數正常運行時是沒有問題的。
下圖是原始碼中報錯的代碼
uj5u.com熱心網友回復:
scala中要先建一個package。要不然找不到classuj5u.com熱心網友回復:
spark遠程除錯是將jar傳上集群啟動,然后在IDE里面去除錯代碼,你用spark-shell根本就沒有程式可以在IDE里面去遠程除錯,斷點都沒得打,怎么除錯呢?uj5u.com熱心網友回復:
可以試試用sparkJobServer開源軟體,通過sparkJobServer發布Rest介面出來更方便。sparkJobServer集成了遠程連接spark功能。轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/47506.html
標籤:Spark
