K8s集群重啟與恢復(fù)-Node節(jié)點(diǎn)啟停方式
更新時(shí)間：2024年08月17日 09:46:50 作者：臨江仙我亦是行人
這篇文章主要介紹了K8s集群重啟與恢復(fù)-Node節(jié)點(diǎn)啟停方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
1 應(yīng)用場(chǎng)景
場(chǎng)景：
- 在實(shí)際工作中，可能某個(gè) Worker 節(jié)點(diǎn)需要維護(hù)
- 遷移，我們需要平滑的停止、啟動(dòng)該節(jié)點(diǎn)
- 應(yīng)盡量減少啟停中對(duì)集群、業(yè)務(wù)造成的影響
注意：
- 剔除 Worker 節(jié)點(diǎn)操作中
- 該 Worker 節(jié)點(diǎn)上的工作負(fù)載（Pod）將被驅(qū)逐到其他節(jié)點(diǎn)上
- 請(qǐng)確保集群資源充足
2 操作步驟
2.1 停止 Worker 節(jié)點(diǎn)調(diào)度
# 查看信息 root@sh-gpu091:~# kubectl get node NAME STATUS ROLES AGE VERSION 172.19.13.31 Ready node 403d v1.14.1 sh-cpu032.aibee.cn Ready node 403d v1.14.1 sh-cpu033.aibee.cn Ready node 403d v1.14.1 sh-gpu091.aibee.cn Ready node 403d v1.14.1 sh-gpu101.aibee.cn Ready node 403d v1.14.1 # 停止 Worker 節(jié)點(diǎn)調(diào)度 root@sh-gpu091:~# kubectl cordon sh-gpu101.aibee.cn node/sh-gpu101.aibee.cn cordoned
- 查看節(jié)點(diǎn)狀態(tài)
root@sh-gpu091:~# kubectl get node NAME STATUS ROLES AGE VERSION 172.19.13.31 Ready node 403d v1.14.1 sh-cpu032.aibee.cn Ready node 403d v1.14.1 sh-cpu033.aibee.cn Ready node 403d v1.14.1 sh-gpu091.aibee.cn Ready node 403d v1.14.1 sh-gpu101.aibee.cn Ready,SchedulingDisabled node 403d v1.14.1
2.2 驅(qū)逐 Worker 節(jié)點(diǎn)上的工作負(fù)載
# --ignore-daemonsets 驅(qū)逐 pod 時(shí)忽略 daemonset # --delete-local-data 驅(qū)逐 pod 時(shí)刪除 pod 的臨時(shí)數(shù)據(jù)，該參數(shù)不會(huì)刪除持久化數(shù)據(jù) root@sh-gpu091:~# kubectl drain sh-gpu101.aibee.cn --delete-local-data --ignore-daemonsets --force node/sh-gpu101.aibee.cn already cordoned WARNING: ignoring DaemonSet-managed Pods: cattle-system/cattle-node-agent-8wcvs, kube-system/kube-flannel-ds-kqzhc, kube-system/nvidia-device-plugin-daemonset-rr2lf, monitoring/prometheus-node-exporter-xtbxp evicting pod "model-server-0" evicting pod "singleview-proxy-client-pbdownloader-0" evicting pod "singleview-proxy-service-0" pod/singleview-proxy-client-pbdownloader-0 evicted pod/singleview-proxy-service-0 evicted pod/model-server-0 evicted node/sh-gpu101.aibee.cn evicted
2.3 停止 Docker、Kubelet 等服務(wù)
systemctl stop kubelet systemctl stop docker
- 查看節(jié)點(diǎn)上是否還有業(yè)務(wù) pod
kubectl get pod -A -o wide |grep sh-gpu101.aibee.cn
- 如果不需要恢復(fù)了，可以刪除節(jié)點(diǎn)并確認(rèn)節(jié)點(diǎn)信息
root@sh-gpu091:~# kubectl delete node sh-gpu101.aibee.cn node "sh-gpu101.aibee.cn" deleted root@sh-gpu091:~# kubectl get node NAME STATUS ROLES AGE VERSION 172.19.13.31 Ready node 403d v1.14.1 sh-cpu032.aibee.cn Ready node 403d v1.14.1 sh-cpu033.aibee.cn Ready node 403d v1.14.1 sh-gpu091.aibee.cn Ready node 403d v1.14.1 root@sh-gpu091:~#
2.4 恢復(fù) Worker 節(jié)點(diǎn)
systemctl start docker systemctl status docker systemctl start kubelet systemctl status kubelet
2.5 允許 Worker 節(jié)點(diǎn)調(diào)度
# 取消不可調(diào)度 kubectl uncordon sh-gpu101.aibee.cn
總結(jié)
以上為個(gè)人經(jīng)驗(yàn)，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
Docker容器啟動(dòng)時(shí)初始化Mysql數(shù)據(jù)庫(kù)的方法
這篇文章給大家介紹Docker容器啟動(dòng)時(shí)初始化Mysql數(shù)據(jù)庫(kù)的方法，本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友參考下吧2013-11-11
Docker?監(jiān)控平臺(tái)部署的兩種實(shí)現(xiàn)步驟
本文主要介紹了Docker?監(jiān)控平臺(tái)部署的兩種實(shí)現(xiàn)步驟,包括cAdvisor、Prometheus和Grafana,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2025-11-11
docker運(yùn)行nginx綁定配置文件失敗原因以及問(wèn)題解決
最近工作中在使用docker運(yùn)行nginx的時(shí)候遇到了些問(wèn)題,下面分享給大家,這篇文章主要給大家介紹了關(guān)于docker運(yùn)行nginx綁定配置文件失敗原因以及問(wèn)題解決的相關(guān)資料,需要的朋友可以參考下2023-02-02
如何使用 docker compose 搭建 fastDFS文件服務(wù)器
這篇文章主要介紹了如何使用 docker compose 搭建 fastDFS文件服務(wù)器,本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2021-10-10
這篇文章主要介紹了docker-compose安裝，yml文件配置,離線安裝及在線安裝的問(wèn)題，本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2021-12-12
Docker不同宿主機(jī)網(wǎng)絡(luò)打通的操作方案
這篇文章主要介紹了Docker不同宿主機(jī)網(wǎng)絡(luò)打通的方案?,本方式使用docker?Swarm集群的方式創(chuàng)建overlay?網(wǎng)絡(luò)進(jìn)行打通,需要的朋友可以參考下2024-08-08
如何解決docker commit后鏡像越來(lái)越大問(wèn)題
解決Docker Commit后鏡像變大問(wèn)題的方法：方法1直接打包容器并導(dǎo)入為鏡像；方法2將容器根目錄文件壓縮后導(dǎo)入為鏡像,方法1更優(yōu),在其他設(shè)備運(yùn)行時(shí)可能出現(xiàn)內(nèi)存不足錯(cuò)誤2025-03-03
這篇文章主要介紹了Docker Swarm概念與用法，幫助大家更好的理解和使用docker容器，感興趣的朋友可以了解下2020-09-09
Docker提示permission?denied錯(cuò)誤的解決方案
這篇文章主要給大家介紹了關(guān)于Docker提示permission?denied錯(cuò)誤的解決方案,出現(xiàn)這個(gè)問(wèn)題是因?yàn)樗拗鳈C(jī)的當(dāng)前運(yùn)行用戶和docker容器里面的運(yùn)行用戶不一致導(dǎo)致訪問(wèn)權(quán)限問(wèn)題,需要的朋友可以參考下2023-08-08
這篇文章主要介紹了用Docker安裝Gitlab的方法步驟，小編覺(jué)得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-08-08