In diesem Dokument wird erläutert, wie die Service Discovery in Google Kubernetes Engine (GKE) die Anwendungsverwaltung vereinfacht und wie Sie die Service Discovery mithilfe von Cloud DNS-Bereichen, Multi-Cluster-Diensten (MCS) und Service Directory über einen einzelnen Cluster hinaus erweitern können.
Dieses Dokument richtet sich an GKE-Nutzer, Entwickler, Administratoren und Architekten. Weitere Informationen zu gängigen Rollen und Beispielaufgaben, auf die wir in Google Cloud -Inhalten verweisen, finden Sie unter Häufig verwendete GKE-Nutzerrollen und -Aufgaben.
Bevor Sie dieses Dokument lesen, sollten Sie mit den folgenden Konzepten vertraut sein:
Übersicht
Service Discovery ist ein Mechanismus, mit dem Dienste und Anwendungen sich dynamisch finden und miteinander kommunizieren können, ohne dass IP-Adressen oder Endpunktkonfigurationen hartcodiert werden müssen. Service Discovery sorgt dafür, dass Anwendungen immer Zugriff auf aktuelle Pod-IP-Adressen haben, auch wenn Pods neu geplant oder neue Pods hinzugefügt werden. Die GKE bietet mehrere Möglichkeiten, die Service Discovery zu implementieren, darunter kube-dns, benutzerdefinierte kube-dns-Bereitstellungen und Cloud DNS. Sie können die DNS-Leistung mit NodeLocal
DNSCache weiter optimieren.
Vorteile von Service Discovery
Service Discovery bietet die folgenden Vorteile:
- Vereinfachte Anwendungsverwaltung: Mit Service Discovery müssen IP-Adressen nicht mehr in Ihren Anwendungskonfigurationen hartcodiert werden. Anwendungen kommunizieren über logische Dienstnamen, die automatisch in die richtigen Pod-IP-Adressen aufgelöst werden. Dieser Ansatz vereinfacht die Konfiguration, insbesondere in dynamischen Umgebungen, in denen sich Pod-IP-Adressen aufgrund von Skalierung oder Neuplanung ändern können.
- Vereinfachte Skalierung und Ausfallsicherheit: Die Service Discovery vereinfacht die Skalierung, da Dienstnutzer von Pod-IP-Adressen entkoppelt werden, die sich häufig ändern. Wenn Ihre Anwendung skaliert wird oder Pods ausfallen und ersetzt werden, aktualisiert Kubernetes automatisch, welche Pods für den Empfang von Traffic für einen bestimmten Dienst verfügbar sind. Service Discovery sorgt dafür, dass Anfragen an den stabilen Dienstnamen nur an fehlerfreie Pods weitergeleitet werden. So kann Ihre Anwendung ohne manuellen Eingriff oder Neukonfiguration des Clients skaliert oder nach Fehlern wiederhergestellt werden.
- Hochverfügbarkeit: GKE verwendet Load Balancing zusammen mit Service Discovery, um die Hochverfügbarkeit zu gewährleisten und die Reaktionsfähigkeit Ihrer Anwendungen auch bei hoher Last zu verbessern.
Load Balancing mit Service Discovery
GKE trägt zur Hochverfügbarkeit Ihrer Anwendungen bei, indem verschiedene Load-Balancing-Ebenen mit Service Discovery kombiniert werden.
- Interne Dienste: Für Dienste, auf die nur innerhalb des Clusters zugegriffen werden kann, fungiert die Datenebene von GKE (
kube-proxyoderCilium) als Load Balancer. Er verteilt den eingehenden Traffic gleichmäßig auf mehrere fehlerfreie Pods, um eine Überlastung zu verhindern und eine hohe Verfügbarkeit zu gewährleisten. - Externe Dienste: Für Dienste, die von außerhalb des Clusters zugänglich sein müssen, stellt GKE Google Cloud Load Balancer bereit. Diese Load Balancer umfassen externe Google Cloud Load Balancer für den öffentlichen Internetzugriff und interne Google Cloud Load Balancer für den Zugriff innerhalb Ihres Virtual Private Cloud-Netzwerks. Diese Load Balancer verteilen den Traffic auf die Knoten in Ihrem Cluster. Die Datenebene auf jedem Knoten leitet den Traffic dann an die entsprechenden Pods weiter.
Sowohl in internen als auch in externen Szenarien wird die Liste der verfügbaren Pods für jeden Dienst durch die Service Discovery kontinuierlich aktualisiert. Durch diese kontinuierliche Aktualisierung wird sichergestellt, dass sowohl die Datenebene (für interne Dienste) als auch die Load Balancer von Google Cloud (für externe Dienste) Traffic nur an fehlerfreie Instanzen weiterleiten.
Anwendungsfälle für Service Discovery
Im Folgenden sind einige gängige Anwendungsfälle für die Service Discovery aufgeführt:
- Mikrodienstarchitektur: In einer Mikrodienstarchitektur bestehen Anwendungen oft aus vielen kleineren, unabhängigen Diensten, die miteinander interagieren müssen. Mit Service Discovery können diese Anwendungen einander finden und Informationen austauschen, auch wenn der Cluster skaliert wird.
- Bereitstellungen ohne Ausfallzeiten ermöglichen und Ausfallsicherheit verbessern: Service Discovery ermöglicht Updates für Anwendungen ohne Ausfallzeiten, einschließlich kontrollierter Roll-outs und Canary-Bereitstellungen. Die Erkennung neuer Dienstversionen wird automatisiert und der Traffic wird auf diese umgeleitet. Dadurch werden Ausfallzeiten während der Bereitstellung reduziert und ein reibungsloser Übergang für Nutzer ermöglicht. Service Discovery erhöht auch die Ausfallsicherheit. Wenn ein Pod in GKE ausfällt, wird ein neuer Pod bereitgestellt. Die Service Discovery registriert den neuen Pod und leitet den Traffic an ihn weiter. Dadurch werden Ausfallzeiten der Anwendung minimiert.
Funktionsweise von Service Discovery
In GKE bestehen Anwendungen häufig aus mehreren Pods, die sich gegenseitig finden und miteinander kommunizieren müssen. Service Discovery bietet diese Funktion mithilfe des Domain Name Systems (DNS). Ähnlich wie Sie DNS verwenden, um Websites im Internet zu finden, verwenden Pods in einem GKE-Cluster DNS, um Dienste anhand ihrer Dienstnamen zu finden und eine Verbindung zu ihnen herzustellen. Mit diesem Ansatz können Pods effektiv interagieren, unabhängig davon, wo sie im Cluster ausgeführt werden. Außerdem können Anwendungen über konsistente Dienstnamen anstelle von instabilen IP-Adressen kommunizieren.
DNS-Auflösung durch Pods
Pods in einem GKE-Cluster lösen DNS-Namen für Dienste und andere Pods mithilfe einer Kombination aus automatisch generierten DNS-Einträgen und ihrer lokalen DNS-Konfiguration auf.
Service-DNS-Namen
Wenn Sie einen Kubernetes-Dienst erstellen, weist die GKE ihm automatisch einen DNS-Namen zu. Dieser Name hat ein vorhersehbares Format, das jeder Pod im Cluster für den Zugriff auf den Dienst verwenden kann:
<service-name>.<namespace>.svc.cluster.local
Die Standardclusterdomain ist cluster.local. Sie können die Domain jedoch beim Erstellen des Clusters anpassen. Ein Dienst mit dem Namen my-web-app im Standard-Namespace hätte beispielsweise den DNS-Namen my-web-app.default.svc.cluster.local.
Die Rolle von /etc/resolv.conf
Zum Auflösen dieser DNS-Namen verwenden Pods ihre /etc/resolv.conf-Datei. Diese Konfigurationsdatei teilt dem Pod mit, an welchen Nameserver er seine DNS-Abfragen senden soll. Die IP-Adresse des in dieser Datei aufgeführten Nameservers hängt von den spezifischen DNS-Features ab, die in Ihrem GKE-Cluster aktiviert sind. In der folgenden Tabelle ist aufgeführt, welche Nameserver-IP ein Pod basierend auf Ihrer Konfiguration verwendet:
| Cloud DNS für GKE | NodeLocal DNSCache | Nameserver-Wert in `/etc/resolv.conf` |
|---|---|---|
| Aktiviert | Aktiviert | `169.254.20.10` |
| Aktiviert | Deaktiviert | `169.254.169.254` |
| Deaktiviert | Aktiviert | IP-Adresse des Dienstes „kube-dns“ |
| Deaktiviert | Deaktiviert | IP-Adresse des Dienstes „kube-dns“ |
Diese Konfiguration sorgt dafür, dass DNS-Abfragen vom Pod an die richtige Komponente weitergeleitet werden:
- NodeLocal DNSCache: bietet schnelle, lokale Suchvorgänge auf dem Knoten.
- Metadatenserver-IP (
169.254.169.254): Wird verwendet, wenn Cloud DNS für GKE ohne NodeLocal DNSCache aktiviert ist. DNS-Abfragen werden an diese IP-Adresse weitergeleitet, die von Cloud DNS zum Abfangen und Verarbeiten von DNS-Anfragen verwendet wird. kube-dns-Dienst-IP-Adresse: Wird für die Standardauflösung innerhalb des Clusters verwendet, wenn Cloud DNS for GKE deaktiviert ist.
DNS-Architektur in GKE
GKE bietet eine flexible Architektur für die Service Discovery, hauptsächlich mithilfe von DNS. Die folgenden Komponenten arbeiten zusammen, um DNS-Abfragen in Ihrem Cluster aufzulösen:
kube-dns: Der Standard-Cluster-DNS-Anbieter für GKE Standard-Cluster. Es wird als verwaltetes Deployment von Pods im Namespacekube-systemausgeführt und überwacht die Kubernetes API auf neue Dienste, um die erforderlichen DNS-Einträge zu erstellen.- Cloud DNS: Der vollständig verwaltete DNS-Dienst von Google Cloud. Es bietet eine hochskalierbare und zuverlässige Alternative zu
kube-dnsund ist der Standard-DNS-Anbieter für GKE Autopilot-Cluster. NodeLocal DNSCache: ein GKE-Add-on, das die Leistung von DNS-Lookups verbessert. Es führt auf jedem Knoten in Ihrem Cluster einen DNS-Cache aus und arbeitet entweder mitkube-dnsoder Cloud DNS zusammen, um DNS-Abfragen lokal zu verarbeiten. Dadurch werden die Latenz und die Last auf dem zentralen DNS-Anbieter des Clusters reduziert. Für GKE Autopilot-Cluster istNodeLocal DNSCachestandardmäßig aktiviert und kann nicht überschrieben werden.- Benutzerdefiniertes
kube-dns-Deployment: Ein Deployment, mit dem Sie Ihre eigene Instanz vonkube-dnsbereitstellen und verwalten können, was mehr Kontrolle über diekube-dns-Konfiguration und -Ressourcen bietet.
DNS-Anbieter auswählen
In der folgenden Tabelle sind die in GKE verfügbaren DNS-Anbieter zusammengefasst, einschließlich ihrer Funktionen und wann sie jeweils ausgewählt werden sollten:
| Anbieter | Features | Eignung |
|---|---|---|
| `kube-dns` | Clusterinterne DNS-Auflösung für Dienste und Pods. | Alle Cluster mit Standardnetzwerkanforderungen. Die neue Version von „kube-dns“ ist sowohl für kleine als auch für große Cluster geeignet. |
| Cloud DNS | Erweiterte DNS-Funktionen (private Zonen, Traffic-Steuerung, globales Load-Balancing) und Integration in andere Google Cloud -Dienste. | Externe Bereitstellung von Diensten, Multi-Cluster-Umgebungen oder Cluster mit hohen DNS-Abfrageraten (QPS). |
| Benutzerdefiniertes `kube-dns`-Deployment | Zusätzliche Kontrolle über die Konfiguration, die Ressourcenzuweisung und die Möglichkeit, alternative DNS-Anbieter zu verwenden. | Große Cluster oder spezifische DNS-Anforderungen, die eine aggressivere Skalierung oder eine detaillierte Kontrolle über die Ressourcenzuweisung erfordern. |
Service Discovery außerhalb eines einzelnen Clusters
Mit den folgenden Methoden können Sie Service Discovery über einen einzelnen GKE-Cluster hinaus erweitern:
Cloud DNS-Bereich
Cluster, die Cloud DNS für Cluster-DNS verwenden, können in einem von drei verfügbaren Bereichen betrieben werden:
- Clusterbereich: Dies ist das Standardverhalten für Cloud DNS. In diesem Modus funktioniert Cloud DNS wie
kube-dnsund bietet DNS-Auflösung ausschließlich für Ressourcen innerhalb des Clusters. DNS-Einträge können nur innerhalb des Clusters aufgelöst werden und entsprechen dem Standard-Kubernetes-Dienstschema:<svc>.<ns>.svc.cluster.local. - Additiver VPC-Bereich: Dieses optionale Feature erweitert den Clusterbereich, indem monitorlose Dienste von anderen Ressourcen innerhalb desselben VPC-Netzwerk aufgelöst werden können, z. B. von Compute Engine-VMs oder lokalen Clients, die über Cloud VPN oder Cloud Interconnect verbunden sind.
- VPC-Bereich: Mit dieser Konfiguration können DNS-Einträge für Clusterdienste innerhalb des gesamten VPC-Netzwerks aufgelöst werden. Bei diesem Ansatz kann jeder Client, der sich in derselben VPC befindet oder mit ihr verbunden ist (über Cloud VPN oder Cloud Interconnect), Dienstnamen direkt auflösen.
Weitere Informationen zum VPC-Bereichs-DNS finden Sie unter Cloud DNS für GKE verwenden.
Multi-Cluster-Dienste
Multi-Cluster-Services (MCS) ermöglichen Service Discovery und Traffic-Management über mehrere GKE-Cluster hinweg. Mit MCS können Sie Anwendungen erstellen, die sich über mehrere Cluster erstrecken, und gleichzeitig eine einheitliche Dienstumgebung beibehalten.
MCS nutzt DNS-basierte Service Discovery, um Services über Cluster hinweg zu verbinden.
Wenn Sie eine MCS-Instanz erstellen, werden DNS-Einträge im Format <svc>.<ns>.svc.clusterset.local generiert. Diese Einträge werden in die IP-Adressen der Endpunkte des Dienstes in jedem teilnehmenden Cluster aufgelöst.
Wenn ein Client in einem Cluster auf einen MCS zugreift, werden Anfragen an den nächsten verfügbaren Endpunkt in einem der teilnehmenden Cluster weitergeleitet. Diese Trafficverteilung wird von kube-proxy (oder Cilium in GKE Dataplane V2) auf jedem Knoten verwaltet. Das trägt zu einer effizienten Kommunikation und Load Balancing über Cluster hinweg bei.
Service Directory für GKE
Service Directory für GKE bietet eine einheitliche Registry für die Service Discovery in Ihren Kubernetes- und Nicht-Kubernetes-Deployments. Service Directory kann sowohl GKE-Dienste als auch Nicht-GKE-Dienste in einer einzigen Registry registrieren.
Service Directory ist besonders in folgenden Fällen nützlich:
- Sie benötigen eine einzige Registry für Kubernetes- und Nicht-Kubernetes-Anwendungen zur gegenseitigen Discovery.
- Sie benötigen ein verwaltetes Service Discovery-Tool.
- Die Möglichkeit, Metadaten zu Ihrem Dienst zu speichern, auf die andere Clients zugreifen können.
- Die Möglichkeit, Zugriffsberechtigungen auf Dienstebene festzulegen. Service Directory-Dienste können über DNS, HTTP und gRPC aufgelöst werden. Service Directory ist in Cloud DNS eingebunden und kann Cloud DNS-Einträge ergänzen, die Diensten in Service Directory entsprechen.
Weitere Informationen finden Sie unter Service Directory für GKE konfigurieren.
DNS-Leistung optimieren und Best Practices
Damit die Service Discovery zuverlässig und effizient funktioniert, insbesondere in großen Clustern oder Clustern mit hohem Traffic, sollten Sie die folgenden Best Practices und Optimierungsstrategien beachten.
Leistung mit NodeLocal DNSCache optimieren
Bei Clustern mit einer hohen Pod-Dichte oder Anwendungen, die ein hohes Volumen an DNS-Abfragen generieren, können Sie die DNS-Lookup-Geschwindigkeit verbessern, indem Sie NodeLocal DNSCache aktivieren. NodeLocal DNSCache ist ein GKE-Add-on, das auf jedem Knoten in Ihrem Cluster einen DNS-Cache ausführt. Wenn ein Pod eine DNS-Anfrage stellt, wird die Anfrage an den Cache gesendet, der sich auf demselben Knoten befindet. Dieser Ansatz reduziert die Latenz und den Netzwerkverkehr.
Weitere Informationen zum Aktivieren und Konfigurieren dieser Funktion finden Sie unter NodeLocal DNSCache einrichten.
DNS-Anbieter skalieren
Wenn Sie kube-dns verwenden und gelegentlich Zeitüberschreitungen auftreten, insbesondere bei hohem Traffic, müssen Sie möglicherweise die Anzahl der kube-dns-Replikate skalieren. Der kube-dns-autoscaler passt die Anzahl der Replikate entsprechend der Anzahl der Knoten und Kerne im Cluster an. Seine Parameter können so eingestellt werden, dass mehr Replikate früher bereitgestellt werden.
Eine ausführliche Anleitung finden Sie unter Benutzerdefiniertes kube-dns-Deployment einrichten.
Allgemeine Best Practices
- Wählen Sie den geeigneten DNS-Anbieter aus: Wählen Sie den DNS-Anbieter basierend auf den Anforderungen Ihres Clusters aus. Cloud DNS wird für Arbeitslasten mit hohen Abfragen pro Sekunde, Multi-Cluster-Umgebungen und für die Einbindung in Ihr größeres VPC-Netzwerk empfohlen. Die neue Version von
kube-dnseignet sich für eine Vielzahl von Clustern, von klein bis groß, die Standardanforderungen für die Service Discovery im Cluster haben. - Spot-VMs oder VMs auf Abruf für
kube-dnsvermeiden: Sorgen Sie für die Stabilität des DNS-Dienstes Ihres Clusters, indem Sie kritische Systemkomponenten wiekube-dnsnicht auf Spot-VMs oder VMs auf Abruf ausführen. Unerwartete Knotenbeendigungen können zu Problemen mit der DNS-Auflösung führen. - Verwenden Sie klare und aussagekräftige Dienstnamen: Verwenden Sie konsistente und aussagekräftige Namenskonventionen für Ihre Dienste, damit Anwendungskonfigurationen leichter zu lesen und zu verwalten sind.
- Mit Namespaces organisieren: Verwenden Sie Kubernetes-Namespaces, um verwandte Dienste zu gruppieren. So lassen sich Namenskonflikte vermeiden und die Organisation von Clusterressourcen wird verbessert.
- DNS überwachen und validieren: Überwachen Sie regelmäßig DNS-Messwerte und -Logs, um potenzielle Probleme zu erkennen, bevor sie sich auf Ihre Anwendungen auswirken. Testen Sie die DNS-Auflösung regelmäßig in Ihren Pods, um sicherzustellen, dass die Service Discovery wie erwartet funktioniert.
Nächste Schritte
- Übersicht über Cluster-DNS in GKE
- Eine Übersicht zur Verwendung von DNS in Kubernetes-Clustern finden Sie unter DNS für Dienste und Pods.
- NodeLocal DNSCache einrichten
- Benutzerdefiniertes
kube-dns-Deployment einrichten