信息項

相關文檔

使用須知

• 數據面組件相關

• 集群升級相關

• Kubernetes原生配置相關

• ACK Serverless集群相關

• 注冊集群相關

• 應用目錄相關

高危操作

• 集群相關高危操作

• 節點池相關高危操作

• 網絡與負載均衡相關高危操作

• 存儲相關高危操作

• 日志相關高危操作

分類

高危操作

影響

恢復方案

API Server

刪除API Server所使用的SLB。

導致集群不可操作。

不可恢復，請重新創建集群。重建集群請參見創建Kubernetes托管版集群。

Worker節點

修改集群內節點安全組。

可能導致節點不可用。

將節點重新添加到集群自動創建的節點安全組中，請參見安全組與ECS實例關聯的管理。

節點到期或被銷毀。

該節點不可用。

不可恢復。

重裝操作系統。

節點上組件被刪除。

節點移出再加入集群。相關操作請參見移除節點、添加已有節點。

自行升級節點組件版本。

可能導致節點無法使用。

回退到原始版本。

更改節點IP。

節點不可用。

改回原IP。

自行修改核心組件（kubelet、docker、containerd 等）參數。

可能導致節點不可用。

按照官網推薦配置參數。

修改操作系統配置。

可能導致節點不可用。

嘗試還原配置項或刪除節點重新購買。

修改節點時間。

可能導致節點上組件工作異常。

還原節點時間。

Master節點（ACK專有版集群）

修改集群內節點安全組。

可能導致Master節點不可用。

將節點重新添加到集群自動創建的節點安全組中，請參見安全組與ECS實例關聯的管理。

節點到期或被銷毀。

該Master節點不可用。

不可恢復。

重裝操作系統。

Master節點上組件被刪除。

不可恢復。

自行升級Master或者etcd組件版本。

可能導致集群無法使用。

回退到原始版本。

刪除或格式化節點/etc/kubernetes等核心目錄數據。

該Master節點不可用。

不可恢復。

更改節點IP。

該Master節點不可用。

改回原IP。

自行修改核心組件（etcd、kube-apiserver、docker等）參數。

可能導致Master節點不可用。

按照官網推薦配置參數。

自行更換Master或etcd 證書

可能導致集群無法使用。

不可恢復。

自行增加或減少Master節點。

可能導致集群無法使用。

不可恢復。

修改節點時間。

可能導致節點上組件工作異常。

還原節點時間。

其他

通過RAM執行權限變更或修改操作。

集群部分資源如負載均衡可能無法創建成功。

恢復原先權限。

高危操作

影響

恢復方案

刪除伸縮組。

導致節點池異常。

不可恢復，只能重建節點池。重建節點池請參見操作步驟。

通過kubectl移除節點。

節點池節點數顯示和實際不符。

通過容器服務管理控制臺或者節點池相關API移除指定節點（參見移除節點）或者修改節點池點數進行望節點數縮容（參見創建節點池）。

直接釋放ECS實例。

可能導致節點池詳情頁面顯示異常。開啟期望節點數的節點池為維持期望節點數，將會根據相應節點池配置自動擴容到期望節點數。

不可恢復。正確做法是通過容器服務管理控制臺或者節點池相關API修改節點池的期望節點數進行縮容（參見創建節點池）或移除指定節點（參見移除節點）。

對開啟自動伸縮的節點池進行手動擴容或縮容。

自動伸縮組件會根據策略自動調整節點數，導致結果與期望不符。

不可恢復。自動伸縮節點池無需手動干預。

修改ESS伸縮組的最大或最小實例數。

可能導致擴縮容異常。

• 對于未開啟自動伸縮組的節點池，ESS伸縮組最大和最小實例數改為默認值2000和0。

• 對于開啟自動伸縮的節點池，將ESS伸縮組最大和最小實例數修改為與節點池最大和最小節點數一致。

添加已有節點前不進行數據備份。

添加前實例上的數據丟失。

不可恢復。

• 手動添加已有節點前必須對要保留的所有數據進行提前備份。

• 自動添加節點時會執行系統盤替換操作，需要您提前備份保存在系統盤中的有用數據。

在節點系統盤中保存重要數據。

節點池的自愈操作可能通過重置節點配置的方式修復節點，因此可能導致系統盤數據丟失。

不可恢復。正確做法是將重要數據存放于額外的數據盤或者云盤、NAS、OSS。

高危操作

影響

恢復方案

修改內核參數net.ipv4.ip_forward=0。

網絡不通。

修改內核參數為net.ipv4.ip_forward=1。

修改內核參數：

• net.ipv4.conf.all.rp_filter = 1|2

• net.ipv4.conf.[ethX].rp_filter = 1|2

  說明

  ethX代表所有以eth開頭的網卡。

網絡不通。

修改內核參數為：

• net.ipv4.conf.all.rp_filter = 0

• net.ipv4.conf.[ethX].rp_filter = 0

修改內核參數net.ipv4.tcp_tw_reuse = 1。

導致Pod健康檢查異常。

修改內核參數為net.ipv4.tcp_tw_reuse = 0。

修改內核參數net.ipv4.tcp_tw_recycle = 1。

導致NAT異常。

修改內核參數net.ipv4.tcp_tw_recycle = 0。

修改內核參數net.ipv4.ip_local_port_range。

導致網絡偶發不通。

修改內核參數到默認值net.ipv4.ip_local_port_range="32768 60999"。

安裝防火墻軟件，例如Firewalld或者ufw等。

導致容器網絡不通。

卸載防火墻軟件并重啟節點。

節點安全組配置未放通容器 CIDR的53端口UDP。

集群內DNS無法正常工作。

按照官網推薦配置放通安全組。

修改或者刪除ACK添加的SLB的標簽。

導致SLB異常。

恢復SLB的標簽。

通過負載均衡控制臺修改ACK管理的SLB的配置，包括SLB、監聽及虛擬服務器組。

導致SLB異常。

恢復SLB的配置。

移除Service中復用已有SLB的Annotation，即service.beta.kubernetes.io/alibaba-cloud-loadbalancer-id: ${YOUR_LB_ID}。

導致SLB異常。

在Service中添加復用已有SLB的Annotation。

通過負載均衡控制臺刪除ACK創建的SLB。

可能導致集群網絡異常。

通過刪除Service的方式刪除SLB。刪除Service請參見刪除Service。

在安裝Nginx Ingress Controller組件的情況下手動刪除 kube-system命名空間下的nginx-ingress-lb Service。

Ingress Controller工作不正常，嚴重時產生崩潰。

使用以下YAML新建一個同名Service。

apiVersion: v1
kind: Service
metadata:
  annotations:
  labels:
    app: nginx-ingress-lb
  name: nginx-ingress-lb
  namespace: kube-system
spec:
  externalTrafficPolicy: Local
  ports:
  - name: http
    port: 80
    protocol: TCP
    targetPort: 80
  - name: https
    port: 443
    protocol: TCP
    targetPort: 443
  selector:
    app: ingress-nginx
  type: LoadBalancer

新增或修改ECS節點上DNS配置文件/etc/resolv.conf中nameserver選項。

若配置的DNS服務器配置不合理，可能導致DNS無法解析，影響集群正常運行。

您如果想要使用自建DNS服務器作為上游服務器，建議在CoreDNS側進行配置。具體操作，請參見CoreDNS配置說明。

高危操作

影響

恢復方案

控制臺手動解掛云盤。

Pod寫入報IO Error。

重啟Pod，手動清理節點掛載殘留。

節點上umount磁盤掛載路徑

Pod寫入本地磁盤。

重啟Pod。

節點上直接操作云盤。

Pod寫入本地磁盤。

不可恢復。

多個Pod掛載相同云盤。

Pod寫入本地磁盤或者報錯IO Error。

確保一個云盤給一個Pod使用。

手動刪除NAS掛載目錄。

Pod寫入報IO Error。

重啟Pod。

刪除正在使用的NAS盤或掛載點。

Pod出現IO Hang。

重啟ECS節點。重啟具體操作，請參見重啟ECS實例。

高危操作

影響

恢復方案

刪除宿主機/tmp/ccs-log-collector/pos目錄。

日志重復采集。

不可恢復。該目錄下的文件記錄了日志的采集位置。

刪除宿主機/tmp/ccs-log-collector/buffer目錄。

日志丟失。

不可恢復。該目錄是待消費的日志緩存文件。

刪除aliyunlogconfig CRD資源。

日志采集失效。

重新創建刪除的CRD以及對應的資源，但失效期間日志無法恢復。

刪除CRD會關聯刪除對應所有的實例，即使恢復CRD后還需要手動創建被刪除的實例。

刪除日志組件。

日志采集失效。

重新安裝日志組件并手動恢復aliyunlogconfig CRD實例，刪除期間日志無法恢復。

刪除日志組件相當于刪除aliyunlogconfig CRD以及日志采集器Logtail，期間日志采集能力全部丟失。