Multi-Cluster-Probleme beheben

In diesem Abschnitt werden häufig auftretende Probleme bei Cloud Service Mesh und deren Behebung beschrieben. Weitere Informationen finden Sie unter Support.

Clusterübergreifende Zeitüberschreitungen, hohe Latenz oder unerwarteter clusterübergreifender Traffic

Bei Arbeitslasten in einer Flotte mit mehreren Clustern kann es zu Zeitüberschreitungen oder hoher Tail-Latenz kommen, wenn die clusterübergreifende Endpunkterkennung ohne Pod-zu-Pod-Verbindung aktiv ist.

Symptome

Möglicherweise treten die folgenden Symptome auf:

  • Anfragen schlagen nach einer Verzögerung mit einer Zeitüberschreitung oder einem HTTP-Fehler 503 oder 504 fehl.
  • Die Tail-Latenz steigt, wenn Wiederholungsversuche nicht erreichbare Remote-Pods erreichen, bevor sie einen lokalen Pod erreichen oder fehlschlagen.
  • Probleme treten auf, nachdem Sie einen weiteren Cluster in der Flotte registriert oder die automatische Verwaltung für einen Cluster aktiviert haben.

Ursachen

Dieses Problem tritt auf, wenn die clusterübergreifende Endpunkterkennung für mehrere Cluster in einer Flotte aktiviert ist, aber die Netzwerkverbindung oder Firewallregeln zwischen ihren Pods fehlen:

  • Wenn mehrere Cluster in derselben Flotte multicluster_mode: connected in der ConfigMap asm-options haben, wird der Traffic zwischen ihnen per Load Balancing verteilt. Weitere Informationen finden Sie unter Endpunkterkennung konfigurieren.
  • Cloud Service Mesh erstellt keine VPC-Routen (Virtual Private Cloud) oder Firewallregeln zwischen Clustern. Anfragen, die an lokale Pods weitergeleitet werden, sind erfolgreich, während Anfragen, die an Pods in Remote-Clustern weitergeleitet werden, warten, bis das Verbindungszeitlimit abläuft.

Problem diagnostizieren

Prüfen Sie, ob für mindestens zwei Cluster in Ihrer Flotte multicluster_mode auf connected festgelegt ist. Führen Sie gcloud container fleet memberships list aus, um die Flottencluster aufzulisten, und prüfen Sie dann jeden Cluster:

kubectl get configmap asm-options -n istio-system \
    -o jsonpath='{.data.multicluster_mode}{"\n"}'

Problem beheben

Je nachdem, ob Traffic zwischen Clustern fließen soll, haben Sie folgende Möglichkeiten:

Fehlende Secrets

Dieser Abschnitt gilt nur für die clusterinterne Steuerungsebene und die verwaltete Steuerungsebene mit der Istiod-Implementierung.

Cloud Service Mesh benötigt eine kubeconfig-Datei, die in das Kubernetes-Secret eingebettet ist, um eine ordnungsgemäße Remote-Endpunkterkennung zu ermöglichen. Wenn die Secrets fehlen, sehen Nutzer während des clusterübergreifenden Load-Balancing immer, dass Anfragen Pods im lokalen Cluster treffen.

Überprüfen Sie mit dem folgenden Befehl in jedem Cluster, ob das Secret erstellt wurde:

kubectl get secret istio-remote-secret-CLUSTER_NAME_i -n istio-system

Prüfen Sie die erwartete Ausgabe:

NAME                                   TYPE     DATA   AGE
istio-remote-secret-CLUSTER_NAME_i   Opaque   1      44s

Löschen Sie zur problembehebung alle Remote-Secrets und führen Sie den Befehl create-mesh noch einmal aus.

Nicht erreichbarer API-Server

Dieser Abschnitt gilt nur für die clusterinterne Steuerungsebene und die verwaltete Steuerungsebene (istiod-Implementierung).

Die Steuerungsebene von Cloud Service Mesh muss den API-Server des Remote-Clusters erreichen. In folgenden Situationen ist der Remotecluster unter Umständen nicht mehr erreichbar:

Bei einem nicht erreichbaren API-Server gibt Istiod Fehlermeldungen im Log aus. Nutzer sehen beim clusterübergreifenden Cluster-Load-Balancing immer Anfragen an den lokalen Pod.

Legen Sie in der Oberfläche Log-Explorer die Abfrage resource.type auf istio_control_plane fest.

Prüfen Sie, ob ungültige Secret-Fehler vorliegen.

Beheben Sie zuerst das zugrunde liegende API-Server-Erreichbarkeitsproblem, um dieses Problem zu beheben. Löschen Sie dann alle Remote-Secrets in jedem Cluster und führen Sie den Befehl create-mesh noch einmal aus.