在Eclipse scala版本中寫了一個spark的程式,IDE中陳述句語法沒有什么問題,但是卻有編譯錯誤
下面是錯誤描述的圖片,好像是說在包org.apache.avro.reflect.Stringable中有問題

請問這是什么原因?
uj5u.com熱心網友回復:
是不是版本沖突uj5u.com熱心網友回復:
后面我通過注釋掉代碼,然后逐行加入的方法測驗了一下,發現問題主要在下面的陳述句如果是
val lines = sc.hadoopFile[LongWritable, Text]("/data/algo/cookie_mapping/201409/20140930.lzo",
classOf[DeprecatedLzoTextInputFormat], classOf[LongWritable], classOf[Text]);
就會報上面的錯;
如果是val =lines = sc.hadoopFile("/data/algo/cookie_mapping/201409/20140930.lzo"),就編譯通過
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/100170.html
標籤:Spark
上一篇:spark程式例外
