我搭建了3臺機器的集群,運行Hadoop權威指南第二章關于氣象資料的程式,運行1901-1902的資料是可以的。把資料改成從1901到1950年的所有資料,大概有500M,運行程式卡在map 0% reduce 0%.什么問題
軟體版本:Hadoop1.0.3,jdk1.7.0_51,eclipse4.2.1
uj5u.com熱心網友回復:
看一下你的mapreduce程式是運行在本地還是集群上,在eclipse中的程式如果沒有設定一般都是運行在本地的,你在運行程式時看一下安裝eclipse機器的資源消耗,如果是在本地可能是設定的記憶體不夠,或者是資料格式有問題uj5u.com熱心網友回復:
這個問題比較復雜,可以qq聊 2965799541uj5u.com熱心網友回復:
看看日志, 處理50G的資料都很快就完成轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/107010.html
標籤:云存儲
下一篇:關于資料集成的問題
