012.Kubernetes二進制部署worker節點Flannel

一部署flannel

1.1 安裝flannel

kubernetes 要求集群內各節點(包括 master 節點)能通過 Pod 網段互聯互通。flannel 使用 vxlan 技術為各節點創建一個可以互通的 Pod 網絡，使用的端口為 UDP 8472。

flanneld 第一次啟動時，從 etcd 獲取配置的 Pod 網段信息，為本節點分配一個未使用的地址段，然後創建 flannedl.1 網絡接口（也可能是其它名稱，如 flannel1 等）。

flannel 將分配給自己的 Pod 網段信息寫入 /run/flannel/docker 文件，docker 後續使用這個文件中的環境變量設置 docker0 網橋，從而從這個地址段為本節點的所有 Pod 容器分配 IP。

更多flannel參考：《008.Docker Flannel+Etcd分佈式網絡部署》。

提示：k8smaster01節點已下載相應二進制，可直接分發至node節點。

1.2 分發flannel

  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for node_ip in ${NODE_IPS[@]}
   4   do
   5     echo ">>> ${node_ip}"
   6     scp flannel/{flanneld,mk-docker-opts.sh} root@${node_ip}:/opt/k8s/bin/
   7     ssh root@${node_ip} "chmod +x /opt/k8s/bin/*"
   8   done

1.3 創建flannel證書和密鑰

提示：k8smaster01節點已創建flanneld的CA證書請求文件，可直接分發至node節點。

1.4 分發證書和私鑰

  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for node_ip in ${NODE_IPS[@]}
   4   do
   5     echo ">>> ${node_ip}"
   6     ssh root@${node_ip} "mkdir -p /etc/flanneld/cert"
   7     scp flanneld*.pem root@${node_ip}:/etc/flanneld/cert
   8   done

1.5 創建flanneld的systemd

提示：k8smaster01節點已創建創建flanneld的systemd，可直接分發至node節點。

1.6 分發flannel systemd

  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for node_ip in ${NODE_IPS[@]}
   4   do
   5     echo ">>> ${node_ip}"
   6     scp flanneld.service root@${node_ip}:/etc/systemd/system/
   7   done

二啟動並驗證

2.1 啟動flannel

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# for node_ip in ${NODE_IPS[@]}
   3   do
   4     echo ">>> ${node_ip}"
   5     ssh root@${node_ip} "systemctl daemon-reload && systemctl enable flanneld && systemctl restart flanneld"
   6   done

2.2 檢查flannel啟動

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# for node_ip in ${NODE_IPS[@]}
   3   do
   4     echo ">>> ${node_ip}"
   5     ssh root@${node_ip} "systemctl status flanneld|grep Active"
   6   done

2.3 檢查pod網段信息

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# etcdctl \
   3   --endpoints=${ETCD_ENDPOINTS} \
   4   --ca-file=/etc/kubernetes/cert/ca.pem \
   5   --cert-file=/etc/flanneld/cert/flanneld.pem \
   6   --key-file=/etc/flanneld/cert/flanneld-key.pem \
   7   get ${FLANNEL_ETCD_PREFIX}/config			#查看集群 Pod 網段(/16)

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# etcdctl \
   3   --endpoints=${ETCD_ENDPOINTS} \
   4   --ca-file=/etc/kubernetes/cert/ca.pem \
   5   --cert-file=/etc/flanneld/cert/flanneld.pem \
   6   --key-file=/etc/flanneld/cert/flanneld-key.pem \
   7   ls ${FLANNEL_ETCD_PREFIX}/subnets			#查看已分配的 Pod 子網段列表(/24)
   8 [root@k8smaster01 ~]# etcdctl \
   9   --endpoints=${ETCD_ENDPOINTS} \
  10   --ca-file=/etc/kubernetes/cert/ca.pem \
  11   --cert-file=/etc/flanneld/cert/flanneld.pem \
  12   --key-file=/etc/flanneld/cert/flanneld-key.pem \
  13   get ${FLANNEL_ETCD_PREFIX}/subnets/172.30.8.0-21	#查看某一 Pod 網段對應的節點 IP 和 flannel 接口地址

解釋：

172.30.8.0/21 被分配給節點 k8snode02 （172.24.8.75）；

VtepMAC 為 k8snode02 節點的 flannel.1 網卡 MAC 地址。

2.4 檢查flannel網絡信息

  1 [root@k8snode02 ~]# ip addr show

解釋：flannel.1 網卡的地址為分配的 Pod 子網段的第一個 IP（.0），且是 /32 的地址。

[root@k8smaster01 ~]# ip route show |grep flannel.1

172.30.8.0/21 via 172.30.8.0 dev flannel.1 onlink

172.30.128.0/21 via 172.30.128.0 dev flannel.1 onlink

172.30.208.0/21 via 172.30.208.0 dev flannel.1 onlink

172.30.216.0/21 via 172.30.216.0 dev flannel.1 onlink

解釋：

到其它節點 Pod 網段請求都被轉發到 flannel.1 網卡；

flanneld 根據 etcd 中子網段的信息，如 ${FLANNEL_ETCD_PREFIX}/subnets/172.30.32.0-21 ，來決定進請求發送給哪個節點的互聯 IP。

2.5 驗證各節點flannel

在各節點上部署 flannel 后，檢查是否創建了 flannel 接口(名稱可能為 flannel0、flannel.0、flannel.1 等)：

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# for all_ip in ${ALL_IPS[@]}
   3   do
   4     echo ">>> ${all_ip}"
   5     ssh ${all_ip} "/usr/sbin/ip addr show flannel.1|grep -w inet"
   6   done

輸出：

在各節點上 ping 所有 flannel 接口 IP，確保能通：

  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# for all_ip in ${ALL_IPS[@]}
   3   do
   4     echo ">>> ${all_ip}"
   5     ssh ${all_ip} "ping -c 1 172.30.8.0"
   6     ssh ${all_ip} "ping -c 1 172.30.32.0"
   7     ssh ${all_ip} "ping -c 1 172.30.128.0"
   8     ssh ${all_ip} "ping -c 1 172.30.208.0"
   9     ssh ${all_ip} "ping -c 1 172.30.216.0"
  10   done

本站聲明:網站內容來源於博客園,如有侵權,請聯繫我們,我們將及時處理

【其他文章推薦】

※USB CONNECTOR掌控什麼技術要點? 帶您認識其相關發展及效能

※評比前十大台北網頁設計、台北網站設計公司知名案例作品心得分享

※智慧手機時代的來臨，RWD網頁設計已成為網頁設計推薦首選

※評比南投搬家公司費用收費行情懶人包大公開

Orignal From: 012.Kubernetes二進制部署worker節點Flannel

環保清潔

搜尋此網誌