一 安裝jdk
zookeeper是采用java開發的,所以需要依賴jdk環境,我們需要先安裝jdk,最便捷的方式就是采用yum,但是yum的官方源速度很慢,我們可以先更換yum源;
#備份初始源
mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup
#下載新的CentOS-Base.repo 源檔案
cd /etc/yum.repos.d
curl -O http://mirrors.aliyun.com/repo/Centos-7.repo
mv Centos-7.repo CentOS-Base.repo
#更新快取
yum clean all
yum makecache
ok現在我們就可以使用yum安裝需要的jdk了
yum -y install java-1.8.0-openjdk-demo.x86_64
#驗證一下
java -version
二 安裝zookeeper
#下載二進制壓縮包
wget https://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.6.1/apache-zookeeper-3.6.1-bin.tar.gz
#解壓縮
tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz
#移動至local下
mv apache-zookeeper-3.5.7-bin /usr/local
# 創建軟連接
ln -s /usr/local/apache-zookeeper-3.5.7-bin /usr/local/zookeeper
# 添加至環境變數
echo export PATH=\"\$PATH:/usr/local/zookeeper/bin\" >> ~/.bashrc
source ~/.bashrc
目錄結構:
組態檔模板:
主要配置項:
三 啟動與訪問
#在啟動前需要先提供 一個dataDir,在安裝目錄下創建名為data的目錄
#該目錄默認指向tmp必須修改,用于存盤zookeeper持久化資料和日志檔案;
cd /usr/local/zookeeper
mkdir data
#復制配置模板更名為zoo.cfg
cd /usr/local/zookeeper/conf
cp zoo_sample.cfg zoo.cfg
#修改zoo.cfg中的dataDir指向新建的data目錄
#dataDir=/usr/local/zookeeper/data
#啟動
zkServer.sh start
客戶端訪問
zkCli.sh
#當服務器不在當前機器上時通過 -server引數指定主機地址
zkCli.sh -server 10.211.55.3:2181
四 集群搭建
集群搭建準備
在開始搭建集群之前我們需要先了解一下概念：
三種角色:
為了避免 Zookeeper 的單點問題，zk 也是以集群的形式出現的，zk 集群中的角色主要有 以下三類:
-
Leader 集群的主節點,可以處理寫請求,并將資料同步至從節點
-
Follower 從節點,跟隨者,決策者,學習者,僅可以處理讀請求,收到寫請求是自動轉發給leader,具備選舉權,被選舉權,決策權
-
Observer 學習者 僅可處理讀請求,且不具備選舉權,被選舉權和決策權
由于選舉leader的程序使用的是paxos演算法,參與選舉的節點越多則選舉程序越慢,且選舉程序中節點不可對外服務,Observe可以縮短leader選舉程序所需的時間; 減少集群不可用;
法定人數
zookeeper服務器運行于兩種模式:獨立模式和集群模式，集群模式下，會復制所有服務器的 資料樹，但如果讓客戶端等待所有復制完成，延遲太高，這里引入法定人數概念，指為了使zookeeper 集群正常作業，必須有效運行的服務器數量，同時也是服務器通知客戶端保存成功前，必須保存資料的 服務器最小數，例如我們有一個5臺服務器的zookeeper集群，法定人數為3，只要任何3個服務器保存了資料，客戶端就會收到確認，
另外當法定人數為3時，集群中只要有3臺服務器存活，整個zookeeper集群就是可用的，
注意:observer不算在法定人數內
集群應有奇數個節點
zookeeper節點數量因當是大于1的奇數,因為zookeeper集群必須在大多數節點都可用的情況下才能正常提供訪問,若節點為3個則運行宕機1個,若節點為4個同樣只允許宕機1個,偶數個節點的允許宕機的節點占比更低;
集群搭建
ip配置
通常虛擬機會以dhcp的方式獲得ip,ip可能會發生變化,造成無法連接服務器,所以我們先對克隆得到的虛擬機,進行靜態ip配置,同時修改hostname,保證集群中所有服務器的主機名和地址都是不同的
#修改主機名稱 zk1 是新的主機名
echo zk1 > /etc/hostname
#修改 ip配置
vim /etc/sysconfig/network-scripts/ifcfg-eth0
修改后的檔案內容:
只修改標注的內容,其他的保持原樣
防火墻設定:
為了使服務器之間能互相訪問,需要開放對應埠,或是停止防火墻(僅限測驗環境),相關 指令 如下:
#1.禁止firewall開機啟動
systemctl disable firewalld
#2.設定開機啟動防火墻
systemctl enable firewalld.service
zookeeper集群部署
zookeeper節點數量因當是大于1的奇數,因為zookeeper集群必須在大多數節點都可用的情況下才能正常提供訪問,若節點為3個則運行宕機1個,若節點為4個同樣只允許宕機1個,偶數個節點的允許宕機的節點占比更低;
1.在組態檔中配置節點資訊
注意:若是在一臺機器上做測驗,則需要需改clientPort,以及每個節點的通信埠和選舉埠,保證不與其他節點沖突
2.在dataDir目錄下創建myid
該檔案用于存盤集群中各個zookeeper節點的編號
創建myid檔案:
touch /usr/local/zookeeper/data/myid
#檔案內容為當前zookeeper的節點編號與組態檔對應
echo 1 > /usr/local/zookeeper/data/myid
注意:若data目錄下有其他檔案則需要洗掉,在創建集群前要保持zookeeper是空的
3.克隆當前虛擬機
1.逐個啟動新的虛擬機并修改ip地址(按照上面的方法)
2.修改myid檔案中的節點id與組態檔匹配
3.逐個啟動每個虛擬機上的zookeeper服務
zkServer.sh start
#啟動完成后可以通過以下指令查看當前zookeeper的狀態
zkServer.sh status
可以發現此時有一個leader和兩個follower表示集群已正常運行
Observer
為什么需要Observer:
為了提高zookeeper的吞吐量,我們可以為其添加更多的follower,但是更多的follower會導致投票程序變得更慢,而客戶端的回應時間變長(因為投票程序zookeeper不能回應),因此zookeeper設計了Observer節點
什么是Observer:
Observer與普通的 follower僅有一個區別: Observer不參與 投票環節; 但是提議 和commit同樣會發送給Observer,這意味著Observer中的資料也是一致的,既提高了整個集群的性能同時避免了,投票帶來的延遲;
配置方法:
只需要在 節點后面 添加observer關鍵字即可將節點作為Observer
echo server.4=10.211.55.9:28888:38888:observer >> /usr/local/zookeeper/conf/zoo.cfg
#添加后的內容:
server.1=10.211.55.5:28888:38888
server.2=10.211.55.6:28888:38888
server.3=10.211.55.7:28888:38888
server.4=10.211.55.8:28888:38888:observer
啟動集群后通過status查看節點狀態:
zkServer.sh status
/usr/bin/java
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost.
Mode: observer
但要注意Observer不能算在法定人數內;
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/170357.html
標籤：Java
上一篇：Zookeeper入門
下一篇：Caused by: java.sql.SQLSyntaxErrorException: Unknown column 'name' in 'field list'