etcd 資料庫用量過高可能會導致叢集不穩定和資源短缺,進而使 Google Kubernetes Engine (GKE) 叢集無法有效擴充。本文說明如何找出 etcd 用量接近上限的叢集,並提供釋出空間的建議,確保叢集穩定運作。
對於負責維護 GKE 叢集健康狀態和擴充性的平台管理員和操作員來說,這項資訊非常重要。如要進一步瞭解 Google Cloud 內容中提及的常見角色和工作範例,請參閱「常見的 GKE 使用者角色和工作」。
本文說明如何排解 etcd 用量過高導致的叢集穩定性問題。如果您遇到其他擴充性問題,請參閱下列其中一份文件:
- 叢集自動配置器問題:
- 如要排解無法新增節點的問題,請參閱「排解叢集自動配置器無法向上擴充的問題」。
- 如要排解未移除使用率偏低節點的問題,請參閱「排解叢集自動配置器未縮減的問題」。
- HorizontalPodAutoscaler 問題:如要排解 HorizontalPodAutoscaler 無法運作的問題,請參閱「排解水平自動調度 Pod 資源問題」。
- Autopilot 資源調度問題:如要進一步瞭解 Autopilot 專屬問題,包括與資源調度相關的問題,請參閱「排解 Autopilot 叢集問題」。
找出 etcd 用量即將達到上限的叢集
當 etcd 用量即將達到上限時,GKE 會提供洞察和建議。您可以透過下列方式查看這些洞察資料和建議:
- 使用 Google Cloud 控制台。前往「Kubernetes clusters」(Kubernetes 叢集) 頁面。在特定叢集的「通知」欄中,查看「釋出空間可降低叢集不穩定的風險」建議。
使用 gcloud CLI 或 Recommender API,並指定
ETCD_DB_USAGE_APPROACHING_LIMIT建議工具子類型。如要查詢這項建議,請執行下列指令:
gcloud recommender recommendations list \ --recommender=google.container.DiagnosisRecommender \ --location=LOCATION \ --project=PROJECT_ID \ --format=yaml \ --filter="recommenderSubtype:ETCD_DB_USAGE_APPROACHING_LIMIT"
如要採行這項建議,請從 etcd 移除所有不必要的資料來釋出空間,這可能包括刪除舊資源或將大型物件移出 etcd。詳情請參閱「規劃大型 GKE 叢集」。
找出各物件類型的儲存空間用量接近上限的叢集
如果每種 etcd 物件的總大小接近限制,GKE 會提供洞察和建議。您可以透過下列方式查看這些洞察資料和建議:
- 使用 Google Cloud 控制台。前往「Kubernetes clusters」(Kubernetes 叢集) 頁面。在特定叢集的「通知」欄中,查看「縮減資源類型大小」建議。
使用 gcloud CLI 或 Recommender API,並指定
APISERVER_RESOURCE_TYPE_SIZE_EXCEEDS_LIMIT建議工具子類型。如要查詢這項建議,請執行下列指令:
gcloud recommender recommendations list \ --recommender=google.container.DiagnosisRecommender \ --location=LOCATION \ --project=PROJECT_ID \ --format=yaml \ --filter="recommenderSubtype:APISERVER_RESOURCE_TYPE_SIZE_EXCEEDS_LIMIT"如要決定要移除哪些物件,可以使用 kubectl 列出物件。舉例來說,如果 ConfigMap 接近儲存空間上限,下列指令會輸出所有命名空間中的所有 ConfigMap,協助您找出可刪除的項目:
kubectl get configmaps --all-namespaces > new_file.txt
如要採行這項建議並釋出空間,請從儲存空間中移除指定類型的所有不必要物件。這可能包括刪除舊有資源,或是將大型物件移出儲存空間。詳情請參閱「規劃大型 GKE 叢集」。
後續步驟
如果您在說明文件中找不到問題的解決方案,請參閱「取得支援」一文,瞭解如何取得進一步協助,包括下列主題的建議:
- 與 Cloud Customer Care 聯絡,建立客服案件。
- 在 StackOverflow 提問,並使用
google-kubernetes-engine標記搜尋類似問題,向社群尋求支援。您也可以加入#kubernetes-engineSlack 頻道,取得更多社群支援。 - 使用公開 Issue Tracker 提出問題或功能要求。