為什么spark程式提交運行一次就結束了??? 每執行一次計算就要撰寫一次程式么??還是撰寫一次腳本不斷地去submit應用程式?? 拿web應用來說,我寫一個servlet,然后就可以丟到tomcat里面運行,瀏覽器每提交一次請求,我的servlet代碼就執行一次, spark沒有類似這樣的功能么????????? 求大神指點一二
uj5u.com熱心網友回復:
高手在何處,求貼子不沉!!!!!!!!!!!!!!uj5u.com熱心網友回復:
web服務中創建一個sparkcontext實體,然后就可以來個請求就向spark提交一次了uj5u.com熱心網友回復:
spark分為實時和離線,如果是離線,你提交一次它運行完了當然停了。如果是實時,只要你喂他資料,他就不停計算,你得結合具體需求呀親uj5u.com熱心網友回復:
Spark 可以啟動ThrifServer作為JDBC Server來持續運行,回應查詢陳述句(一個job)uj5u.com熱心網友回復:
哪些是實時的?哪些是離線的??我目前貌似只發現spark Stream有點持續運行的味道..., 連個官網的Demo都沒弄出來, 都不敢繼續看下去了,哎,小菜的悲哀啊,i'm so sad
uj5u.com熱心網友回復:
ThrifServer是個什么東西呢??而且我希望的效果是類似web專案的效果, 一個jdbc server貌似沒有太大的用處
uj5u.com熱心網友回復:
spark-streaming 就是實時計算,我自己寫過一些demo,地址是:http://blog.csdn.net/qq_23660243/article/details/51481407 你可以參照一些,就是些最基礎的uj5u.com熱心網友回復:
我猜測你沒有完全理解我的意思,JDBC只是一個介面方式,它允許你提交SQL,然后它會被轉換為Spark 的Job 來執行。這個Server啟動后會一直監聽在那里。
uj5u.com熱心網友回復:
我對spark不懂,抱歉,幫不了你。
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/75865.html
標籤:Spark
上一篇:如何使用JS做S3
