大資料-玩轉資料-Hadoop 集群搭建和簡單應用
目錄
? 概念了解
? 集群服務器規劃
? 軟體安裝步驟概述
? Hadoop安裝
o 1、規劃
o 2、上傳解壓縮
o 3、修改組態檔
o 4、把安裝包分別分發給其他的節點
o 5、配置Hadoop環境變數
o 6、查看hadoop版本
o 7、Hadoop初始化
o 8、啟動
o 9、查看4臺服務器的行程
o 10、啟動HDFS和YARN的web管理界面
? Hadoop的簡單使用
o 創建檔案夾
o 查看創建的檔案夾
o 上傳檔案
o 下載檔案
o 運行一個mapreduce的例子程式： wordcount
Hadoop集群中各個角色的名稱：
服務 主節點 從節點
HDFS NameNode DataNode
YARN ResourceManager NodeManager
集群服務器規劃
使用4臺CentOS-6.7虛擬機進行集群搭建
關閉防火墻
軟體安裝步驟概述
1、獲取安裝包
2、解壓縮和安裝
3、修改組態檔
4、初始化，配置環境變數，啟動，驗證
Hadoop安裝
1、規劃
規劃安裝用戶：hadoop
登錄root 用戶，創建hadoop用戶（useradd hadoop）
修改hadoop密碼（passwd hadoop）
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/387824.html
標籤：其他