解決多叢集問題

本節說明常見的 Cloud Service Mesh 問題和解決方法。如需其他協助,請參閱「取得支援」。

跨叢集逾時、高延遲或非預期的跨叢集流量

如果機群中有多個叢集,且在沒有 Pod 對 Pod 連線能力的情況下啟用跨叢集端點探索功能,工作負載可能會發生逾時或高尾端延遲。

問題

您可能會觀察到下列症狀:

  • 要求在延遲後失敗,並顯示逾時或 HTTP 503 或 504 錯誤。
  • 重試作業在到達本機 Pod 或失敗前,會先到達無法連線的遠端 Pod,導致尾端延遲時間激增。
  • 在機群中註冊其他叢集,或啟用叢集的自動管理功能後,就會開始發生問題。

原因

如果機群中有多個叢集啟用跨叢集端點探索功能,但 Pod 之間缺少網路連線或防火牆規則,就會發生這個問題:

  • 如果同一個機群中的多個叢集在 asm-options ConfigMap 中有 multicluster_mode: connected,流量會在這些叢集之間進行負載平衡。詳情請參閱「設定端點探索」。
  • Cloud Service Mesh 不會在叢集之間建立虛擬私有雲 (VPC) 路由或防火牆規則。轉送至本機 Pod 的要求會成功,而轉送至遠端叢集 Pod 的要求則會等待連線逾時。

診斷問題

檢查機群中是否有兩個以上的叢集將 multicluster_mode 設為 connected。執行 gcloud container fleet memberships list 列出機群叢集,然後檢查各個叢集:

kubectl get configmap asm-options -n istio-system \
    -o jsonpath='{.data.multicluster_mode}{"\n"}'

解決問題

視您是否要讓流量在叢集之間流動,執行下列其中一項操作:

缺少 Secret

本節僅適用於叢集內控制層,以及採用 Istiod 實作的代管控制層。

Cloud Service Mesh 仰賴 Kubernetes 密鑰中嵌入的 kubeconfig 檔案,才能正確探索遠端端點。如果沒有 Secret,在跨叢集負載平衡期間,使用者一律會看到要求傳送至本機叢集中的 Pod。

在每個叢集執行下列指令,確認 Secret 已建立:

kubectl get secret istio-remote-secret-CLUSTER_NAME_i -n istio-system

確認預期的輸出內容:

NAME                                   TYPE     DATA   AGE
istio-remote-secret-CLUSTER_NAME_i   Opaque   1      44s

如要復原,請刪除所有遠端 Secret,然後重新執行 create-mesh 指令。

無法連線至 API 伺服器

本節僅適用於叢集內控制層和代管 (istiod 實作)。

Cloud Service Mesh 的控制層必須能連上遠端叢集的 API 伺服器。下列情況可能會導致無法連線至遠端叢集:

如果 API 伺服器無法連線,Istiod 會在記錄中輸出錯誤訊息。在跨叢集負載平衡期間,使用者一律會看到要求傳送至本機 Pod。

在「Logs Explorer」介面中,將查詢 resource.type 設為 istio_control_plane。

查看是否有任何無效的密鑰錯誤。

如要解決這個問題,請修正基礎 API 伺服器連線問題。接著,刪除每個叢集中的所有遠端 Secret,並重新執行 create-mesh 指令。