文章目錄
- 前言
- 一、Zookeeper是什么?
- 二、安裝步驟
- 1.下載搭建
- 2.啟動測驗
- 總結
前言
本人大三大資料專業,上周?????初學如何搭建hadoop環境,配置好了靜態ip搭建完了hadoop分布式集群后,開始搭建Zookeeper軟體,之后搭建hbase環境(https://blog.csdn.net/master_hunter/article/details/108704148),在此領域本人有諸多不明確疑問,可能文章會有些許錯誤,望大家在評論區指正,本篇文章錯誤將會不斷更正維護,
具體參考了https://www.cnblogs.com/Genesis2018/p/8304708.html
這位大佬的安裝步驟,
一、Zookeeper是什么?
為了實作分布式服務中的資料同步與一致性、群組管理監控、分布投票與鎖、以及命名尋址等,需要在集群中提供分布式協調服務,為此便產生了Zookeeper,
二、安裝步驟
Zookeeper采用集群化部署方式,一般部署在多臺服務器上,以防單點失效,為了在投票時易于收斂一般采用奇數臺服務器部署,具體架構和存盤結構本篇文章不給予闡述,只是部署,
1.鏡像下載
本人用的是清華鏡像下載的是3.4.14版本的Zookeeper,建議使用帶bin后綴的tar包下載,不帶bin后綴為源代碼形式未編譯,安裝完后缺少bin目錄,會報錯,
wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper- 3.4.14/zookeeper- 3.4.14.tar.gz
tar解壓縮下載的檔案
tar -zxvf apache-zookeeper-3.4.14.bin.tar.gz
將zookeeper移至local目錄下
mv zookeeper- 3.4.14 /usr/local/
創建zookeeper的資料目錄
mkdir -p /usr/local/zookeeper- 3.4.14/data
編輯配置環境
cp /usr/local/zookeeper- 3.4.14/conf/zoo_sample.cfg /usr/local/zookeeper- 3.4.14/conf/zoo.cfg
vi /usr/local/zookeeper- 3.4.14/conf/zoo.cfg
在zoo.cfg添加部署的虛擬機地址
dataDir=/usr/local/zookeeper- 3.4.14/data
server.1=hadoop1:2888:3888
server.2=hadoop2:2888:3888
server.3=hadoop3:2888:3888
2888埠號是ZooKeeper服務之間通信的埠,而3888是ZooKeeper與其他應用程式通信的埠,
配置zookeeper的環境變數
vi /etc/profile.d/zookeeper.sh
添加
export ZOOKEEPER_HOME=/usr/local/zookeeper- 3.4.14
export PATH=$PATH:$ZOOKEEPER_HOME/bin
記得執行生效
source /etc/profile.d/zookeeper.sh
傳給其他虛擬機
scp -r /etc/profile.d/zookeeper.sh hadoopxx:/etc/profile.d/
scp -r /usr/local/zookeeper- 3.4.14 hadoopxx:/usr/local/
查看命令執行成功與否
echo $?
0
在其他節點上
vi /usr/local/zookeeper- 3.4.14/data/myid
添加
1
根據節點數量依次排列
檔案中只包含一行,且內容為該節點對應的從屬節點中的id編號,主節點和從屬節點分別對應的myid檔案中的值是1和2....,
執行保存
source /etc/profile.d/zookeeper.sh
回到master上開啟zookeeper
/usr/local/zookeeper- 3.4.14/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper- 3.4.14/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
利用zkCli.sh鏈接zookeepe
/usr/local/zookeeper- 3.4.14/bin/zkCli.sh -server hadoop1:2181
[zk: localhost:2181(CONNECTED) 0] help
[zk: localhost::2181(CLOSED) 3] quit
在其他節點上開啟服務
# /usr/local/zookeeper- 3.4.14/bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper- 3.4.14/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED# /usr/local/zookeeper- 3.4.14/bin/zkCli.sh -server hadoopxx:2181
[zk:hadoopxx:2181(CONNECTED) 0] quit
1.啟動測驗
開啟所有節點上的zkserver
查看各個節點的狀態
/zkServer.sh status
如果成功啟動則會顯示該節點推選結果是leader或者follower
總結
需要根據日志報的錯誤自行調配,之后我會發布關于配置zookeeper常見錯誤的一些解決方法,希望能幫到大家!
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/113135.html
標籤:其他
上一篇:PHP7開啟OPcache和Swoole哪個提升更大?性能的提升對比
下一篇:docker 常用命令合集
