Multi-Cluster-Probleme beheben
In diesem Abschnitt werden häufig auftretende Probleme bei Cloud Service Mesh und deren Behebung beschrieben. Weitere Informationen finden Sie unter Support.
Clusterübergreifende Zeitüberschreitungen, hohe Latenz oder unerwarteter clusterübergreifender Traffic
Bei Arbeitslasten in einer Flotte mit mehreren Clustern kann es zu Zeitüberschreitungen oder hoher Tail-Latenz kommen, wenn die clusterübergreifende Endpunkterkennung ohne Pod-zu-Pod-Verbindung aktiv ist.
Symptome
Möglicherweise treten die folgenden Symptome auf:
- Anfragen schlagen nach einer Verzögerung mit einer Zeitüberschreitung oder einem HTTP-Fehler
503oder504fehl. - Die Tail-Latenz steigt, wenn Wiederholungsversuche nicht erreichbare Remote-Pods erreichen, bevor sie einen lokalen Pod erreichen oder fehlschlagen.
- Probleme treten auf, nachdem Sie einen weiteren Cluster in der Flotte registriert oder die automatische Verwaltung für einen Cluster aktiviert haben.
Ursachen
Dieses Problem tritt auf, wenn die clusterübergreifende Endpunkterkennung für mehrere Cluster in einer Flotte aktiviert ist, aber die Netzwerkverbindung oder Firewallregeln zwischen ihren Pods fehlen:
- Wenn mehrere Cluster in derselben Flotte
multicluster_mode: connectedin der ConfigMapasm-optionshaben, wird der Traffic zwischen ihnen per Load Balancing verteilt. Weitere Informationen finden Sie unter Endpunkterkennung konfigurieren. - Cloud Service Mesh erstellt keine VPC-Routen (Virtual Private Cloud) oder Firewallregeln zwischen Clustern. Anfragen, die an lokale Pods weitergeleitet werden, sind erfolgreich, während Anfragen, die an Pods in Remote-Clustern weitergeleitet werden, warten, bis das Verbindungszeitlimit abläuft.
Problem diagnostizieren
Prüfen Sie, ob für mindestens zwei Cluster in Ihrer Flotte multicluster_mode auf connected festgelegt ist. Führen Sie gcloud container fleet memberships list aus, um die Flottencluster aufzulisten, und prüfen Sie dann jeden Cluster:
kubectl get configmap asm-options -n istio-system \
-o jsonpath='{.data.multicluster_mode}{"\n"}'
Problem beheben
Je nachdem, ob Traffic zwischen Clustern fließen soll, haben Sie folgende Möglichkeiten:
- Wenn Sie das Load Balancing des Traffics zwischen Clustern beenden möchten, deaktivieren Sie die Endpunkterkennung. Weitere Informationen finden Sie in der Dokumentation zum Deaktivieren der Endpunkterkennung.
- Wenn Sie nur bestimmte Dienste im lokalen Cluster beibehalten möchten, lesen Sie den Abschnitt Traffic im Cluster beibehalten.
- Wenn Sie clusterübergreifenden Traffic zulassen möchten, prüfen Sie die Voraussetzungen für Multi-Cluster-Netzwerke und erstellen Sie Firewallregeln zwischen Ihren Clustern.
Fehlende Secrets
Dieser Abschnitt gilt nur für die clusterinterne Steuerungsebene und die verwaltete Steuerungsebene mit der Istiod-Implementierung.
Cloud Service Mesh benötigt eine kubeconfig-Datei, die in das Kubernetes-Secret eingebettet ist, um eine ordnungsgemäße Remote-Endpunkterkennung zu ermöglichen. Wenn die Secrets fehlen, sehen Nutzer während des clusterübergreifenden Load-Balancing immer, dass Anfragen Pods im lokalen Cluster treffen.
Überprüfen Sie mit dem folgenden Befehl in jedem Cluster, ob das Secret erstellt wurde:
kubectl get secret istio-remote-secret-CLUSTER_NAME_i -n istio-system
Prüfen Sie die erwartete Ausgabe:
NAME TYPE DATA AGE
istio-remote-secret-CLUSTER_NAME_i Opaque 1 44s
Löschen Sie zur problembehebung alle Remote-Secrets und führen Sie den Befehl create-mesh noch einmal aus.
Nicht erreichbarer API-Server
Dieser Abschnitt gilt nur für die clusterinterne Steuerungsebene und die verwaltete Steuerungsebene (istiod-Implementierung).
Die Steuerungsebene von Cloud Service Mesh muss den API-Server des Remote-Clusters erreichen. In folgenden Situationen ist der Remotecluster unter Umständen nicht mehr erreichbar:
- Der Remote-Cluster wurde gelöscht.
- Der Remote-Cluster ist ein privater Cluster, für den kein globaler Zugriff aktiviert ist.
- Der Remote-Cluster ist ein privater Cluster, für den Autorisiertes Master-Netzwerk aktiviert ist, aber die IP-Adresse der Cloud Service Mesh-Steuerungsebene wurde nicht ordnungsgemäß über die Zulassungsliste erlaubt.
Bei einem nicht erreichbaren API-Server gibt Istiod Fehlermeldungen im Log aus. Nutzer sehen beim clusterübergreifenden Cluster-Load-Balancing immer Anfragen an den lokalen Pod.
Legen Sie in der Oberfläche Log-Explorer die Abfrage resource.type auf istio_control_plane fest.
Prüfen Sie, ob ungültige Secret-Fehler vorliegen.
Beheben Sie zuerst das zugrunde liegende API-Server-Erreichbarkeitsproblem, um dieses Problem zu beheben. Löschen Sie dann alle Remote-Secrets in jedem Cluster und führen Sie den Befehl create-mesh noch einmal aus.