一、Moba–Windows軟體
Moba–windows軟體，windows和linux傳輸檔案要用的軟體
1、打開moba創建新的連接服務
二、本地部署
1、在/opt 下創建兩個檔案夾：software、module
2、software：放軟體的壓縮包
module：放軟體解壓后的檔案夾
3、切換到software檔案夾下
cd /opt/software
4、解壓jdk、Hadoop到module檔案夾中
tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/
tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/
5、配置jdk、hadoop環境變數
vi /etc/profile # Shift+g到最后一行
在里面添加
配置完之后生效一下
source /etc/profile
輸入：java -version出現
輸入：hadoop version出現
就ok了
三、Hadoop的本地部署使用
1、首先要有包含內容的檔案
在/opt下面創建一個目錄（檔案夾）test
mkdir test
在/opt/test目錄下面創建input目錄（檔案夾）和output目錄（檔案夾）
mkdir input
mkdir output
在/opt/test/input目錄下創建包含內容的檔案
vi color
2、用hadoop去執行這個檔案
切換到/opt/module/hadoop-3.1.3/share/hadoop/mapreduce目錄下
執行檔案：
hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/test/input/ /opt/test/output/count.txt
3、查看執行后的結果
cd /opt/test/output/count.txt
cat part-r-00000
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/374656.html
標籤：其他