SQL 執行完畢,能夠回傳結果,但是在 applications 中 狀態一直是running,查看 applicationMaster 在 description 出現 foreachAsync at RemoteHiveSparkClient.java:327
相信的資訊如下
foreachAsync at RemoteHiveSparkClient.java:327 +details
org.apache.spark.api.java.AbstractJavaRDDLike.foreachAsync(JavaRDDLike.scala:47)
org.apache.hadoop.hive.ql.exec.spark.RemoteHiveSparkClient$JobStatusJob.call(RemoteHiveSparkClient.java:327)
org.apache.hive.spark.client.RemoteDriver$JobWrapper.call(RemoteDriver.java:353)
org.apache.hive.spark.client.RemoteDriver$JobWrapper.call(RemoteDriver.java:322)
java.util.concurrent.FutureTask.run(FutureTask.java:262)
java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145)
java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:615)
java.lang.Thread.run(Thread.java:745)
在yarn資源管理web ui,就一直是running狀態,其實已經執行完了,就這么掛著
哪位大神能指點一下
uj5u.com熱心網友回復:
沒有人知道嗎uj5u.com熱心網友回復:
我遇到了同樣的問題,請問樓主解決了么uj5u.com熱心網友回復:
腳本結尾增加!quit
主動釋放資源
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/44147.html
標籤:Spark
上一篇:新手,IDEA 遠程提交任務失敗
下一篇:kafka+storm鏈接問題
