請問大家有沒有在cloudera hue界面創建oozie workflow跑pyspark程式？
我模仿官網例子試
workflow詳細如下：
<workflow-app name="spark-python" xmlns="uri:oozie:workflow:0.5">
<start to="spark-3806"/>
<kill name="Kill">
<message>操作失敗，錯誤訊息[${wf:errorMessage(wf:lastErrorNode())}]</message>
</kill>
<action name="spark-3806">
<spark xmlns="uri:oozie:spark-action:0.1">
<job-tracker>${jobTracker}</job-tracker>
<name-node>${nameNode}</name-node>
<master>local[*]</master>
<mode>yarn-client</mode>
<name>MySpark</name>
<jar>/user/hue/oozie/workspaces/workflows/spark-python/lib/DataTest.py</jar>
<spark-opts>--conf spark.yarn.historyServer.address=http://clouderamanager/:18088 --conf spark.eventLog.dir=user/spark/applicationHistory --conf spark.eventLog.enabled=true </spark-opts>
</spark>
<ok to="End"/>
<error to="Kill"/>
</action>
<end name="End"/>
</workflow-app>
總是報錯：Main class [org.apache.oozie.action.hadoop.SparkMain], exit code [1]
官網只看到了調度.jar包的例子https://oozie.apache.org/docs/4.2.0/DG_SparkActionExtension.html#Spark_on_YARN
求指導，謝謝！！
uj5u.com熱心網友回復：
haha,我也遇到類似問題uj5u.com熱心網友回復：
請問，這個問題您解決了嗎？我也遇到了同樣的問題uj5u.com熱心網友回復：
遇到了同樣的問題，樓主怎么解決的，求指點轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/74343.html
標籤：Spark
上一篇：誰有wenke lee資料挖掘入侵檢測系統的tcpdump資料（從iris.cs.uml.cn：8080/network.html獲得，可現在進不去）