解決多叢集問題
本節說明常見的 Cloud Service Mesh 問題和解決方法。如需其他協助,請參閱「取得支援」。
跨叢集逾時、高延遲或非預期的跨叢集流量
如果機群中有多個叢集,且在沒有 Pod 對 Pod 連線能力的情況下啟用跨叢集端點探索功能,工作負載可能會發生逾時或高尾端延遲。
問題
您可能會觀察到下列症狀:
- 要求在延遲後失敗,並顯示逾時或 HTTP
503或504錯誤。 - 重試作業在到達本機 Pod 或失敗前,會先到達無法連線的遠端 Pod,導致尾端延遲時間激增。
- 在機群中註冊其他叢集,或啟用叢集的自動管理功能後,就會開始發生問題。
原因
如果機群中有多個叢集啟用跨叢集端點探索功能,但 Pod 之間缺少網路連線或防火牆規則,就會發生這個問題:
- 如果同一個機群中的多個叢集在
asm-optionsConfigMap 中有multicluster_mode: connected,流量會在這些叢集之間進行負載平衡。詳情請參閱「設定端點探索」。 - Cloud Service Mesh 不會在叢集之間建立虛擬私有雲 (VPC) 路由或防火牆規則。轉送至本機 Pod 的要求會成功,而轉送至遠端叢集 Pod 的要求則會等待連線逾時。
診斷問題
檢查機群中是否有兩個以上的叢集將 multicluster_mode 設為 connected。執行 gcloud container fleet memberships list 列出機群叢集,然後檢查各個叢集:
kubectl get configmap asm-options -n istio-system \
-o jsonpath='{.data.multicluster_mode}{"\n"}'
解決問題
視您是否要讓流量在叢集之間流動,執行下列其中一項操作:
- 如要停止在叢集之間平衡流量負載,請停用端點探索功能。請參閱停用端點探索的說明文件。
- 如要只在本機叢集中保留特定服務,請參閱「將流量保留在叢集內」。
- 如要允許跨叢集流量,請確認多叢集網路必要條件,並在叢集之間建立防火牆規則。
缺少 Secret
本節僅適用於叢集內控制層,以及採用 Istiod 實作的代管控制層。
Cloud Service Mesh 仰賴 Kubernetes 密鑰中嵌入的 kubeconfig 檔案,才能正確探索遠端端點。如果沒有 Secret,在跨叢集負載平衡期間,使用者一律會看到要求傳送至本機叢集中的 Pod。
在每個叢集執行下列指令,確認 Secret 已建立:
kubectl get secret istio-remote-secret-CLUSTER_NAME_i -n istio-system
確認預期的輸出內容:
NAME TYPE DATA AGE
istio-remote-secret-CLUSTER_NAME_i Opaque 1 44s
如要復原,請刪除所有遠端 Secret,然後重新執行 create-mesh 指令。
無法連線至 API 伺服器
本節僅適用於叢集內控制層和代管 (istiod 實作)。
Cloud Service Mesh 的控制層必須能連上遠端叢集的 API 伺服器。下列情況可能會導致無法連線至遠端叢集:
如果 API 伺服器無法連線,Istiod 會在記錄中輸出錯誤訊息。在跨叢集負載平衡期間,使用者一律會看到要求傳送至本機 Pod。
在「Logs Explorer」介面中,將查詢 resource.type 設為 istio_control_plane。
查看是否有任何無效的密鑰錯誤。
如要解決這個問題,請修正基礎 API 伺服器連線問題。接著,刪除每個叢集中的所有遠端 Secret,並重新執行 create-mesh 指令。