跳到主要內容

010.Kubernetes二進制部署kube-controller-manager

一 部署高可用kube-controller-manager



1.1 高可用kube-controller-manager介紹



本實驗部署一個三實例 kube-controller-manager 的集群，啟動后將通過競爭選舉機制產生一個 leader 節點，其它節點為阻塞狀態。當 leader 節點不可用時，阻塞的節點將再次進行選舉產生新的 leader 節點，從而保證服務的可用性。

為保證通信安全，本文檔先生成 x509 證書和私鑰，kube-controller-manager 在如下兩種情況下使用該證書：




  • 與 kube-apiserver 的安全端口通信;


  • 在安全端口(https，10252) 輸出 prometheus 格式的 metrics。



1.2 創建kube-controller-manager證書和私鑰



  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# cat > kube-controller-manager-csr.json <<EOF
   3 {
   4   "CN": "system:kube-controller-manager",
   5   "hosts": [
   6     "127.0.0.1",
   7     "172.24.8.71",
   8     "172.24.8.72",
   9     "172.24.8.73"
  10   ],
  11   "key": {
  12     "algo": "rsa",
  13     "size": 2048
  14   },
  15   "names": [
  16     {
  17       "C": "CN",
  18       "ST": "Shanghai",
  19       "L": "Shanghai",
  20       "O": "system:kube-controller-manager",
  21       "OU": "System"
  22     }
  23   ]
  24 }
  25 EOF
  26 #創建kube-controller-manager的CA證書請求文件



解釋：

hosts 列表包含所有 kube-controller-manager 節點 IP；

CN 和 O 均為 system:kube-controller-manager，kubernetes 內置的 ClusterRoleBindings system:kube-controller-manager 賦予 kube-controller-manager 工作所需的權限。 




  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# cfssl gencert -ca=/opt/k8s/work/ca.pem \
   3 -ca-key=/opt/k8s/work/ca-key.pem -config=/opt/k8s/work/ca-config.json \
   4 -profile=kubernetes kube-controller-manager-csr.json | cfssljson -bare kube-controller-manager	#生成CA密鑰（ca-key.pem）和證書（ca.pem）



1.3 分發證書和私鑰



  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for master_ip in ${MASTER_IPS[@]}
   4   do
   5     echo ">>> ${master_ip}"
   6     scp kube-controller-manager*.pem root@${master_ip}:/etc/kubernetes/cert/
   7   done



1.4 創建和分發kubeconfig



kube-controller-manager 使用 kubeconfig 文件訪問 apiserver，該文件提供了 apiserver 地址、嵌入的 CA 證書和 kube-controller-manager 證書： 

  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# kubectl config set-cluster kubernetes \
   4   --certificate-authority=/opt/k8s/work/ca.pem \
   5   --embed-certs=true \
   6   --server=${KUBE_APISERVER} \
   7   --kubeconfig=kube-controller-manager.kubeconfig
   8 
   9 [root@k8smaster01 work]# kubectl config set-credentials system:kube-controller-manager \
  10   --client-certificate=kube-controller-manager.pem \
  11   --client-key=kube-controller-manager-key.pem \
  12   --embed-certs=true \
  13   --kubeconfig=kube-controller-manager.kubeconfig
  14 
  15 [root@k8smaster01 work]# kubectl config set-context system:kube-controller-manager \
  16   --cluster=kubernetes \
  17   --user=system:kube-controller-manager \
  18   --kubeconfig=kube-controller-manager.kubeconfig
  19 
  20 [root@k8smaster01 work]# kubectl config use-context system:kube-controller-manager --kubeconfig=kube-controller-manager.kubeconfig
  21 
  22 [root@k8smaster01 ~]# cd /opt/k8s/work
  23 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
  24 [root@k8smaster01 work]# for master_ip in ${MASTER_IPS[@]}
  25   do
  26     echo ">>> ${master_ip}"
  27     scp kube-controller-manager.kubeconfig root@${master_ip}:/etc/kubernetes/
  28   done



1.5 創建kube-controller-manager的systemd



  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# cat > kube-controller-manager.service.template <<EOF
   4 [Unit]
   5 Description=Kubernetes Controller Manager
   6 Documentation=https://github.com/GoogleCloudPlatform/kubernetes
   7 
   8 [Service]
   9 WorkingDirectory=${K8S_DIR}/kube-controller-manager
  10 ExecStart=/opt/k8s/bin/kube-controller-manager \\
  11   --profiling \\
  12   --cluster-name=kubernetes \\
  13   --controllers=*,bootstrapsigner,tokencleaner \\
  14   --kube-api-qps=1000 \\
  15   --kube-api-burst=2000 \\
  16   --leader-elect \\
  17   --use-service-account-credentials\\
  18   --concurrent-service-syncs=2 \\
  19   --bind-address=##MASTER_IP## \\
  20   --secure-port=10252 \\
  21   --tls-cert-file=/etc/kubernetes/cert/kube-controller-manager.pem \\
  22   --tls-private-key-file=/etc/kubernetes/cert/kube-controller-manager-key.pem \\
  23   --port=0 \\
  24   --authentication-kubeconfig=/etc/kubernetes/kube-controller-manager.kubeconfig \\
  25   --client-ca-file=/etc/kubernetes/cert/ca.pem \\
  26   --requestheader-allowed-names="" \\
  27   --requestheader-client-ca-file=/etc/kubernetes/cert/ca.pem \\
  28   --requestheader-extra-headers-prefix="X-Remote-Extra-" \\
  29   --requestheader-group-headers=X-Remote-Group \\
  30   --requestheader-username-headers=X-Remote-User \\
  31   --authorization-kubeconfig=/etc/kubernetes/kube-controller-manager.kubeconfig \\
  32   --cluster-signing-cert-file=/etc/kubernetes/cert/ca.pem \\
  33   --cluster-signing-key-file=/etc/kubernetes/cert/ca-key.pem \\
  34   --experimental-cluster-signing-duration=8760h \\
  35   --horizontal-pod-autoscaler-sync-period=10s \\
  36   --concurrent-deployment-syncs=10 \\
  37   --concurrent-gc-syncs=30 \\
  38   --node-cidr-mask-size=24 \\
  39   --service-cluster-ip-range=${SERVICE_CIDR} \\
  40   --pod-eviction-timeout=6m \\
  41   --terminated-pod-gc-threshold=10000 \\
  42   --root-ca-file=/etc/kubernetes/cert/ca.pem \\
  43   --service-account-private-key-file=/etc/kubernetes/cert/ca-key.pem \\
  44   --kubeconfig=/etc/kubernetes/kube-controller-manager.kubeconfig \\
  45   --logtostderr=true \\
  46   --v=2
  47 Restart=on-failure
  48 RestartSec=5
  49 
  50 [Install]
  51 WantedBy=multi-user.target
  52 EOF



1.6 分發systemd



  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for (( i=0; i < 3; i++ ))
   4   do
   5     sed -e "s/##MASTER_NAME##/${MASTER_NAMES[i]}/" -e "s/##MASTER_IP##/${MASTER_IPS[i]}/" kube-controller-manager.service.template > kube-controller-manager-${MASTER_IPS[i]}.service
   6   done						#修正相應IP
   7 [root@k8smaster01 work]# ls kube-controller-manager*.service
   8 [root@k8smaster01 ~]# cd /opt/k8s/work
   9 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
  10 [root@k8smaster01 work]# for master_ip in ${MASTER_IPS[@]}
  11   do
  12     echo ">>> ${master_ip}"
  13     scp kube-controller-manager-${master_ip}.service root@${master_ip}:/etc/systemd/system/kube-controller-manager.service
  14   done						#分發system



二 啟動並驗證



2.1 啟動kube-controller-manager 服務



  1 [root@k8smaster01 ~]# cd /opt/k8s/work
   2 [root@k8smaster01 work]# source /opt/k8s/bin/environment.sh
   3 [root@k8smaster01 work]# for master_ip in ${MASTER_IPS[@]}
   4   do
   5     echo ">>> ${master_ip}"
   6     ssh root@${master_ip} "mkdir -p ${K8S_DIR}/kube-controller-manager"
   7     ssh root@${master_ip} "systemctl daemon-reload && systemctl enable kube-controller-manager && systemctl restart kube-controller-manager"
   8   done



2.2 檢查kube-controller-manager 服務



  1 [root@k8smaster01 ~]# source /opt/k8s/bin/environment.sh
   2 [root@k8smaster01 ~]# for master_ip in ${MASTER_IPS[@]}
   3   do
   4     echo ">>> ${master_ip}"
   5     ssh root@${master_ip} "systemctl status kube-controller-manager|grep Active"
   6   done




2.3 查看輸出的 metrics



  1 [root@k8smaster01 ~]# curl -s --cacert /opt/k8s/work/ca.pem --cert /opt/k8s/work/admin.pem --key /opt/k8s/work/admin-key.pem https://172.24.8.71:10252/metrics |head


注意：以上命令在 kube-controller-manager 節點上執行。

2.4 查看權限



  1 [root@k8smaster01 ~]# kubectl describe clusterrole system:kube-controller-manager



ClusteRole system:kube-controller-manager 的權限很小，只能創建 secret、serviceaccount 等資源對象，各 controller 的權限分散到 ClusterRole system:controller:XXX 中。

當在 kube-controller-manager 的啟動參數中添加 --use-service-account-credentials=true 參數，這樣 main controller 會為各 controller 創建對應的 ServiceAccount XXX-controller。內置的 ClusterRoleBinding system:controller:XXX 將賦予各 XXX-controller ServiceAccount 對應的 ClusterRole system:controller:XXX 權限。 

  1 [root@k8smaster01 ~]# kubectl get clusterrole|grep controller



如deployment controller： 

  1 [root@k8smaster01 ~]# kubectl describe clusterrole system:controller:deployment-controller



2.5 查看當前leader



  1 [root@k8smaster01 ~]# kubectl get endpoints kube-controller-manager --namespace=kube-system  -o yaml



kubelet 認證和授權：https://kubernetes.io/docs/admin/kubelet-authentication-authorization/#kubelet-authorization
本站聲明:網站內容來源於博客園,如有侵權,請聯繫我們,我們將及時處理

【其他文章推薦】

※台北網頁設計公司這麼多，該如何挑選?? 網頁設計報價省錢懶人包"嚨底家"



※網頁設計公司推薦更多不同的設計風格，搶佔消費者視覺第一線



※想知道購買電動車哪裡補助最多?台中電動車補助資訊懶人包彙整



※南投搬家費用,距離,噸數怎麼算?達人教你簡易估價知識!


Orignal From: 010.Kubernetes二進制部署kube-controller-manager

留言

張貼留言

這個網誌中的熱門文章

架構設計 | 異步處理流程，多種實現模式詳解

本文源碼：GitHub·點這裏 || GitEE·點這裏 一、異步處理 1、異步概念 異步處理不用阻塞當前線程來等待處理完成，而是允許後續操作，直至其它線程將處理完成，並回調通知此線程。 必須強調一個基礎邏輯，異步是一種設計理念，異步操作不等於多線程，MQ中間件，或者消息廣播，這些是可以實現異步處理的方式。 同步處理和異步處理相對，需要實時處理並響應，一旦超過時間會結束會話，在該過程中調用方一直在等待響應方處理完成並返回。同步類似電話溝通，需要實時對話，異步則類似短信交流，發送消息之後無需保持等待狀態。 2、異步處理優點 雖然異步處理不能實時響應，但是處理複雜業務場景，多數情況都會使用異步處理。 異步可以解耦業務間的流程關聯，降低耦合度； 降低接口響應時間，例如用戶註冊，異步生成相關信息表； 異步可以提高系統性能，提升吞吐量； 流量削峰即把請求先承接下來，然後在異步處理； 異步用在不同服務間，可以隔離服務，避免雪崩； 異步處理的實現方式有很多種，常見多線程，消息中間件，發布訂閱的廣播模式，其根據邏輯在於先把請求承接下來，放入容器中，在從容器中把請求取出，統一調度處理。 注意 ：一定要監控任務是否產生積壓過度情況，任務如果積壓到雪崩之勢的地步，你會感覺每一片雪花都想勇闖天涯。 3、異步處理模式 異步流程處理的實現有好多方式，但是實際開發中常用的就那麼幾種，例如： 基於接口異步響應，常用在第三方對接流程； 基於消息生產和消費模式，解耦複雜流程； 基於發布和訂閱的廣播模式，常見系統通知 異步適用的業務場景，對數據強一致性的要求不高，異步處理的數據更多時候追求的是最終一致性。 二、接口響應異步 1、流程描述 基於接口異步響應的方式，有一個本地業務服務，第三方接口服務，流程如下： 本地服務發起請求，調用第三方服務接口； 請求包含業務參數，和成功或失敗的回調地址； 第三方服務實時響應流水號，作為該調用的標識； 之後第三方服務處理請求，得到最終處理結果； 如果處理成功，回調本地服務的成功通知接口； 如果處理失敗，回調本地服務的失敗通知接口； 整個流程基於部分異步和部分實時的模式，完整處理； 注意 ：如...
張貼留言
閱讀完整內容

.NET Core前後端分離快速開發框架(Core.3.0+AntdVue)

.NET Core前後端分離快速開發框架(Core.3.0+AntdVue) 目錄 引言 時間真快，轉眼今年又要過去了。回想今年，依次開源發布了 Colder.Fx.Net.AdminLTE(254Star) 、 Colder.Fx.Core.AdminLTE(335Star) 、 DotNettySocket(82Star) 、 IdHelper(47Star) ，這些框架及組件都是本着以實際出發，實事求是的態度，力求提高開發效率（我自己都是第一個使用者），目前來看反響不錯。但是隨着前端和後端技術的不斷變革，尤其是前端，目前大環境已經是前後端完全分離為主的開發模式，在這樣的大環境和必然趨勢之下，傳統的MVC就顯得有些落伍了。在這樣的背景下，一款前後端分離的.NET開發框架就顯得尤為必要，由此便定了框架的升級目標： 前後端分離 。 首先後端技術的選擇，從目前的數據來看，.NET Core的發展遠遠快於.NET Framework，最簡單的分析就是Colder.Fx.Core.AdminLTE發布比Colder.Fx.Net.AdminLTE晚，但是星星卻後來居上而且比前者多30%，並且這個差距在不斷擴大，由點及面的分析可以看出我們廣大.NET開發人員學習的熱情和积極向上的態度，並不是某些人所認為的那麼不堪（ 走自己的路，讓別人說去吧 ）。大環境上微軟积極擁抱開源，大力發展.NET Core， 可以說前途一片光明。因此後端決定採用 .NET Core3.0 ，不再浪費精力去支持.NET Framework。 然後是前端技術選擇，首選是三大js框架選擇，也是從實際出發，Vue相對其它而言更加容易上手，並且功能也毫不遜色，深得各種大小公司喜歡，如果偏要說缺點的話，那就是對TS支持不行，但是即將發布Vue3.0肯定會改變這一缺陷。選擇了Vue之後，然後就是UI框架的選擇了，這裏的選擇更多了，我選擇了Ant Design Vue，理由便是簡潔方便，十分符合我的設計理念。 技術選型完畢之後便...
張貼留言
閱讀完整內容

台北市住宅、社區建創儲能設備 最高可獲600萬元補助

為了推廣分散式發電，台北市環保局預計補助1億元供住宅社區設置創能、儲能設備，計有3種方案可供選擇。環保局說明，每案補助額度不超過建制總經費49％，社區每案最高可獲200萬至600萬元補助，住宅每案補助上限100萬元，5月1日起開放申請。 環保局說明，台北市溫室氣體排放量7成以上來自住商部門，其中以使用電力造成間接溫室氣體排放為大宗，台北市平均年用電量約159.86億度，1度電約等同排放0.5公斤二氧化碳，若想達成2050年淨零排放目標，僅靠節能減碳無法達成，必須發展綠色創能、儲能，並且參考歐洲、日本的做法，採分散式發電方式，推廣到社區、住家、商辦，達到供電自給自足目標。 因此，環保局推出「台北市住宅社區創能儲能及節能補助計畫」，補助對象為台北市轄內房屋所有權人及社區管理委員會，補助方案共計3種，每一申請人或每一場址僅能獲1次補助，每案補助額度不超過建置總經費49％為限，5月1日到7月31日開放申請，但補助經費用完即停止申請。 環保局說明，方案A補助對象以社區為主，公共區域申請創能儲能及節能項目，每案補助上限新台幣600萬元；方案B分為住宅或社區公共區域申請創能搭配儲能項目（創能或儲能方案不得單獨申請），社區每案補助上限新台幣400萬元，住宅每案補助上限100萬元。方案C補助對象也是社區，公共區域申請節能項目，每案補助上限新台幣200萬元。 網頁設計 最專業,超強功能平台可客製,窩窩以「數位行銷」「品牌經營」「網站與應用程式」「印刷品設計」等四大主軸，為每一位客戶客製建立行銷脈絡及洞燭市場先機,請問 台中電動車 哪裡在賣比較便宜可以到台中景泰電動車門市去看看總店：臺中市潭子區潭秀里雅潭路一段102-1號。 電動車補助 推薦評價好的 iphone維修 中心擁有專業的維修技術團隊，同時聘請資深iphone手機維修專家，現場說明手機問題，快速修理，沒修好不收錢住家的頂樓裝 太陽光電 聽說可發揮隔熱功效一線推薦東陽能源擁有核心技術、產品研發、系統規劃設置、專業團隊的太陽能發電廠商。 網頁設計 一頭霧水該從何著手呢? 回頭車 貨運收費標準宇安交通關係企業，自成立迄今，即秉持著「以誠待人」、「以實處事」的企業信念 台中搬家公司 教你幾個打包小技巧,輕鬆整理裝箱!還在煩惱搬家費用要多少哪？台中大展搬家線上試算搬家費用，從此不再擔心「物品怎麼計費」、「多...
張貼留言
閱讀完整內容