HDFS與HBASE的動態節點的擴容（增刪）小白級(一)-有解無憂

本文從新建一臺新的虛擬機開始，來詳細的闡述HDFS與HBASE如何動態的增刪節點，

環境：

CentOS-7-x86位
jdk1.8.0_171
zookeeper-3.4.10
hadoop-2.7.3
hbase-1.2.4

master:192.168.193.140
slave1: 192.168.193.141
slave2:192.168.193.142
slave3:192.168.193.143

一、基本配置

在做HDFS和HBASE的動態增刪節點，需要提前準備一臺新的虛擬機slave3

1.關閉防火墻

   
   systemctl stop firewalld
   systemctl disabled firewalld #永久關閉防火墻
   systemctl status firewalld #查看狀態

2.修改主機名

hostnamectl set-hostname slave3

bash  # 立即生效

3.修改時區

echo "TZ='Asia/Shanghai'; export TZ" >> /etc/profile && source /etc/profile

4.修改hosts檔案（所有節點：master,slave1,slave2,slave3）

vi /etc/hosts

192.168.193.140 master
192.168.193.141 slave1
192.168.193.142 slave2
192.168.193.143 slave3

5.時間同步

yum install -y ntp && ntpdate master
crontab -e
*/10 * * * * /usr/sbin/ntpdate master
crontab –l

6.設定免密

#在slave3上

 ssh-keygen -t rsa
 
 ssh-copy-id master
 ssh-copy-id slave1
 ssh-copy-id slave2

#其他節點
 ssh-copy-id slave3

7.配置環境變數

vi /etc/profile

#Java
export JAVA_HOME=/usr/java/jdk1.8.0_171
export CLASSPATH=$JAVA_HOME/lib/
export PATH=$PATH:$JAVA_HOME/bin
export PATH JAVA_HOME CLASSPATH
#zookeeper
export ZOOKEEPER_HOME=/usr/zookeeper/zookeeper-3.4.10
export PATH=$PATH:$ZOOKEEPER_HOME/bin
#hadoop
export HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export CLASSPATH=$CLASSPATH:$HADOOP_HOME/lib
export PATH=$PATH:$HADOOP_HOME/bin


source /etc/profile   #生效環境變數

8. 安裝JDK

因為之前在其他的節點上已經配置過jdk了，我們又設定了免密，所以我們可以把其他節點上的jdk發送到slave3節點上，

#在master上
scp -r /usr/java root@slave3:/usr/

可以用以下命令檢查是否安裝成功

java -version


成功則顯示：
java version "1.8.0_171"
Java(TM) SE Runtime Environment (build 1.8.0_171-b11)
Java HotSpot(TM) 64-Bit Server VM (build 25.171-b11, mixed mode)

9.ZOOKEEPER動態增添節點

同上可以通過其他節點來傳輸

scp -r /usr/zookeeper root@slave3:/usr/

然后需要在原有的基礎上添加slave3,此刻其他節點的zookeeper應該是開啟的，

（在所有節點上）在zookeeper的conf中修改zoo.cfg 檔案

#加入
server.4=slave3:2888:3888

#修改slave3的myid 檔案

vi myid 
4

wq  # 保存退出


#slav3上開啟服務

zkServer.sh start

# 查看狀態（所有節點），結果應該是一個Leader,三個Follower

zkServer.sh status

至此，基礎配置部分就講完了，下一篇文章將講述HDFS動態增刪節點

轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/310524.html

標籤：其他

上一篇：MySQL資料庫增刪改查精華（持續更新中）

下一篇：【物聯網】10.物聯網資料庫 - SQL