在下的環境配置如下:
centOS 6.7
hadoop2.7
hive 2.0
--------------------------
想要在機器上使用hive on spark,其中hadoop2.7支持的spark版本是2.0的。看了官網的介紹ttps://cwiki.apache.org/confluence/display/Hive/Hive+on+Spark:+Getting+Started,需要編譯不包括hive jar的spark。因此自己下載了原始碼來編譯。但是spark2.0的原始碼和以往的版本有區別,沒有make-distribution.sh檔案,只能使用sbt或者maven編譯,但是怎樣實作想要的with-hive功能呢,求教各位。
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/74372.html
標籤:Spark
上一篇:求助,sqoop從Mysql匯入資料到Hive,為何有兩行資料換行了?
下一篇:求PageRank測驗資料集
