k8s集群搭建
- 一、配置要求
- 二、版本統一
- 三、搭建
- 3.1 更新并安裝依賴
- 3.2 安裝Docker
- 3.3 修改hosts檔案
- 3.4 系統基礎前提配置
- 3.5 安裝kubeadm、kubelet、kubectl
- 3.6 拉取proxy/pause/scheduler等國內鏡像
- 3.7 kube init初始化master（在master節點服務器上運行）
- 3.8 部署calico網路插件（在master節點服務器上運行）
- 3.9 kube join
- 四、體驗pod
一、配置要求
- 三臺linux服務器，1臺master節點，2臺worker節點，
- 每臺服務器最少2GB記憶體、2核cpu，
- 各個服務器網路互通，并且可以連接外網，
本文采用的服務器系統為centos7.2，資訊如下：
172.31.54.51（master節點）
172.31.54.61（worker節點）
172.31.54.62（worker節點）
二、版本統一
- Docker 18.09.0
- kubeadm-1.14.0-0
- kubelet-1.14.0-0
- kubectl-1.14.0-0
- k8s.gcr.io/kube-apiserver:v1.14.0
- k8s.gcr.io/kube-controller-manager:v1.14.0
- k8s.gcr.io/kube-scheduler:v1.14.0
- k8s.gcr.io/kube-proxy:v1.14.0
- k8s.gcr.io/pause:3.1
- k8s.gcr.io/etcd:3.3.10
- k8s.gcr.io/coredns:1.3.1
- calico:v3.9
三、搭建
3.1-3.6這六步，每臺服務器都要運行，并且為了防止出現問題需嚴格按照步驟執行，
3.1 更新并安裝依賴
yum -y update
yum install -y conntrack ipvsadm ipset jq sysstat curl iptables libseccomp
3.2 安裝Docker
1.安裝必要的依賴
sudo yum install -y yum-utils \
device-mapper-persistent-data \
lvm2
2.設定docker倉庫
sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
3.設定阿里云鏡像加速器
sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["https://nceu5y2u.mirror.aliyuncs.com"]
}
EOF
sudo systemctl daemon-reload
4.安裝docker并啟動
yum install -y docker-ce-18.09.0 docker-ce-cli-18.09.0 containerd.io
sudo systemctl start docker && sudo systemctl enable docker
3.3 修改hosts檔案
設定master的hostname，并且修改hosts檔案
sudo hostnamectl set-hostname m
vi /etc/hosts
172.31.54.51 m
172.31.54.61 w1
172.31.54.62 w2
設定worker01/02的hostname，并且修改hosts檔案
sudo hostnamectl set-hostname w1
sudo hostnamectl set-hostname w2
vi /etc/hosts
172.31.54.51 m
172.31.54.61 w1
172.31.54.62 w2
設定完后可每臺機器都運行如下命令，檢測下是否能ping通
ping m
ping w1
ping w2
3.4 系統基礎前提配置
# (1)關閉防火墻
systemctl stop firewalld && systemctl disable firewalld
# (2)關閉selinux
setenforce 0
sed -i 's/^SELINUX=enforcing$/SELINUX=permissive/' /etc/selinux/config
# (3)關閉swap
swapoff -a
sed -i '/swap/s/^\(.*\)$/#\1/g' /etc/fstab
# (4)配置iptables的ACCEPT規則
iptables -F && iptables -X && iptables -F -t nat && iptables -X -t nat && iptables -P FORWARD ACCEPT
# (5)設定系統引數
cat <<EOF > /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
sysctl --system
3.5 安裝kubeadm、kubelet、kubectl
1.配置yum源
cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
2.安裝kubeadm&kubelet&kubectl
yum install -y kubelet-1.14.0-0 kubeadm-1.14.0-0 kubectl-1.14.0-0
我在安裝時報了如下錯誤：
分別安裝即可解決：
yum install -y kubelet-1.14.0-0
yum install -y kubeadm-1.14.0-0 kubectl-1.14.0-0
3.docker和k8s設定同一個cgroup
# docker
vi /etc/docker/daemon.json
"exec-opts": ["native.cgroupdriver=systemd"],
systemctl restart docker
# kubelet，這邊如果發現輸出directory not exist，也說明是沒問題的，大家繼續往下進行即可
sed -i "s/cgroup-driver=systemd/cgroup-driver=cgroupfs/g" /etc/systemd/system/kubelet.service.d/10-kubeadm.conf
systemctl enable kubelet && systemctl start kubelet
3.6 拉取proxy/pause/scheduler等國內鏡像
1.查看kubeadm使用的鏡像
kubeadm config images list
這里都是國外的鏡像我們拉不下來
k8s.gcr.io/kube-apiserver:v1.14.0
k8s.gcr.io/kube-controller-manager:v1.14.0
k8s.gcr.io/kube-scheduler:v1.14.0
k8s.gcr.io/kube-proxy:v1.14.0
k8s.gcr.io/pause:3.1
k8s.gcr.io/etcd:3.3.10
k8s.gcr.io/coredns:1.3.1
2.解決國外鏡像不能訪問的問題
創建kubeadm.sh腳本，該腳本作用是：
- 拉取阿里云對應鏡像
- 打tag，將拉取的鏡像改名為k8s開頭的名稱
- 洗掉原有鏡像
腳本內容如下：
#!/bin/bash
set -e
KUBE_VERSION=v1.14.0
KUBE_PAUSE_VERSION=3.1
ETCD_VERSION=3.3.10
CORE_DNS_VERSION=1.3.1
GCR_URL=k8s.gcr.io
ALIYUN_URL=registry.cn-hangzhou.aliyuncs.com/google_containers
images=(kube-proxy:${KUBE_VERSION}
kube-scheduler:${KUBE_VERSION}
kube-controller-manager:${KUBE_VERSION}
kube-apiserver:${KUBE_VERSION}
pause:${KUBE_PAUSE_VERSION}
etcd:${ETCD_VERSION}
coredns:${CORE_DNS_VERSION})
for imageName in ${images[@]} ; do
docker pull $ALIYUN_URL/$imageName
docker tag $ALIYUN_URL/$imageName $GCR_URL/$imageName
docker rmi $ALIYUN_URL/$imageName
done
運行腳本和查看鏡像
# 運行腳本
sh ./kubeadm.sh
# 查看鏡像
docker images
3.7 kube init初始化master（在master節點服務器上運行）
1.初始化主節點
kubeadm init --kubernetes-version=1.14.0 --apiserver-advertise-address=172.31.54.51 --pod-network-cidr=10.244.0.0/16
記得保存好最后kubeadm join的資訊，該命令在worker運行，我這次搭建的kubeadm join如下（暫不運行，下面會說運行時機）：
kubeadm join 172.31.54.51:6443 --token g724py.j0ccpq7ylqes6695 \
--discovery-token-ca-cert-hash sha256:378919f03bf5afcf19e6b9df7d26b90c6589e4bd9e304a9b5a21355b0536e019
2.根據日志提示，創建相關目錄以及授權
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
3.等待一會，查看pod是否運行成功
kubectl get pods -n kube-system
發現像etc，controller，scheduler等組件都以pod的方式安裝成功了，但是可以發現coredns沒有啟動，因為需要安裝網路插件，插件有很多種，本次搭建選用calico，
4.健康檢查
curl -k https://localhost:6443/healthz
3.8 部署calico網路插件（在master節點服務器上運行）
# 在k8s中安裝calico
kubectl apply -f https://docs.projectcalico.org/v3.9/manifests/calico.yaml
# 確認一下calico是否安裝成功（耐心等待,coredns和calico為Running狀態后再進行后面的操作）
kubectl get pods --all-namespaces -w
3.9 kube join
1.在worker節點服務器上執行3.7保存的kubeadm join資訊
kubeadm join 172.31.54.51:6443 --token g724py.j0ccpq7ylqes6695 \
--discovery-token-ca-cert-hash sha256:378919f03bf5afcf19e6b9df7d26b90c6589e4bd9e304a9b5a21355b0536e019
2.在master節點上檢查集群資訊
kubectl get nodes
NAME STATUS ROLES AGE VERSION
master-kubeadm-k8s Ready master 19m v1.14.0
worker01-kubeadm-k8s Ready <none> 3m6s v1.14.0
worker02-kubeadm-k8s Ready <none> 2m41s v1.14.0
至此，集群搭建完成！
四、體驗pod
1.定義pod.yml檔案，比如pod_nginx_rs.yaml
cat > pod_nginx_rs.yaml <<EOF
apiVersion: apps/v1
kind: ReplicaSet
metadata:
name: nginx
labels:
tier: frontend
spec:
replicas: 3
selector:
matchLabels:
tier: frontend
template:
metadata:
name: nginx
labels:
tier: frontend
spec:
containers:
- name: nginx
image: nginx
ports:
- containerPort: 80
EOF
2.根據pod_nginx_rs.yml檔案創建pod
kubectl apply -f pod_nginx_rs.yaml
3.查看pod
kubectl get pods
kubectl get pods -o wide
kubectl describe pod nginx
4.感受通過ReplicaSet將pod擴容
kubectl scale rs nginx --replicas=5
kubectl get pods -o wide
5.洗掉pod
kubectl delete -f pod_nginx_rs.yaml
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/233609.html
標籤：其他