? ? ? ? ? 博主資訊? ? ? ? ?
博主名稱:Yuan-Programmer
鏈接直達:https://bbs.csdn.net/topics/603957283
鏈接直達:https://bbs.csdn.net/topics/603957283
鏈接直達:https://bbs.csdn.net/topics/603957283
鏈接直達:https://bbs.csdn.net/topics/603957283
? ? ? ? ? 點點五星? ? ? ? ?
我正在參加年度博客之星評選,請大家幫我投票打分,您的每一分都是對我的支持與鼓勵,
貢獻您幾秒鐘時間,點個五星,在此感激不盡!!!
各大技識訓礎教學、實戰開發教學(最新更新時間2021-12-4)
打開IDEA編譯器-->>點擊File-->>選擇Settings
找到Plugins,在Installed中搜索big,找到下面這個,點擊下載,我這里已經下載過了
下載之后展開在左側的Tools下的Big...里,配置如下資訊
上面的hadoop01:9000是之前的core-site.xml配置里的
然后點擊右上角的這里,添加新的Application
然后在你的maven專案(MapReduce)的resource下面添加三個組態檔
core-site.xml
<configuration> <property> <!-- URI 定義主機名稱和 namenode 的 RPC 服務器作業的埠號 --> <name>fs.defaultFS</name> <value>hdfs://hadoop01:9000</value> </property> <!-- <property> 這個可以設定為本地路徑,但沒有什么用,這個路徑是 Hadoop 集群用的 Hadoop 臨時目錄,默認是系統的臨時目錄下,/tmp/hadoop-${username} 下 <name>hadoop.tmp.dir</name> <value>/home/xian/hadoop/cluster</value> </property> --> </configuration>log4j.properties(列印日志)
log4j.appender.A1.Encoding=UTF-8 log4j.rootLogger=INFO, stdout log4j.appender.stdout=org.apache.log4j.ConsoleAppender log4j.appender.stdout.layout=org.apache.log4j.PatternLayout log4j.appender.stdout.layout.ConversionPattern=%d{ABSOLUTE} | %-5.5p | %-16.16t | %-32.32c{1} | %-32.32C %4L | %m%nmapred-site.xml
<configuration> <!-- 遠程提交到 Linux 的平臺上 --> <property> <name>mapred.remote.os</name> <value>Linux</value> <description>Remote MapReduce framework's OS, can be either Linux or Windows</description> </property> <!--允許跨平臺提交 解決 /bin/bash: line 0: fg: no job control --> <property> <name>mapreduce.app-submission.cross-platform</name> <value>true</value> </property> </configuration>最后直接點擊運行,就可以在IDEA運行MapReduce程式啦(前提是開啟hadoop服務哦,能再瀏覽器打開HDFS檔案系統)
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/402695.html
標籤:其他







