本文說明 Google Kubernetes Engine (GKE) 的服務探索功能如何簡化應用程式管理作業,以及如何使用 Cloud DNS 範圍、多叢集服務 (MCS) 和 Service Directory,將服務探索功能擴充至單一叢集以外。
本文適用於 GKE 使用者、開發人員、管理員和架構師。如要進一步瞭解 Google Cloud 內容中提及的常見角色和工作範例,請參閱「常見的 GKE 使用者角色和工作」。
閱讀本文前,請務必瞭解下列概念:
總覽
服務探索機制可讓服務和應用程式動態尋找彼此並進行通訊,不必硬式編碼 IP 位址或端點設定。服務探索可確保應用程式一律能存取最新的 Pod IP 位址,即使 Pod 重新排程或新增 Pod 也不例外。GKE 提供多種實作服務探索的方法,包括 kube-dns、自訂 kube-dns 部署作業和 Cloud DNS。您可以使用 NodeLocal
DNSCache 進一步最佳化 DNS 效能。
服務探索的優點
服務探索有下列優點:
- 簡化應用程式管理:服務探索功能可讓您不必在應用程式設定中硬式編碼 IP 位址。應用程式會使用邏輯 Service 名稱進行通訊,這些名稱會自動解析為正確的 Pod IP 位址。這種做法可簡化設定,尤其是在動態環境中,Pod IP 位址可能會因資源調度或重新排程而變更。
- 簡化資源調度與彈性:服務探索會將服務消費者與經常變更的 Pod IP 位址分離,藉此簡化資源調度。當應用程式擴充,或 Pod 故障並遭到替換時,Kubernetes 會自動更新哪些 Pod 可接收特定 Service 的流量。服務探索功能可確保對穩定服務名稱的要求只會導向至健康狀態良好的 Pod,讓應用程式能自行擴充或從故障中復原,無須人工介入或重新設定用戶端。
- 高可用性:GKE 結合負載平衡和服務探索功能,即使在負載沉重的情況下,也能確保高可用性並提升應用程式的回應速度。
透過服務探索進行負載平衡
GKE 結合不同層級的負載平衡和服務探索功能,確保應用程式具備高可用性。
- 內部服務:對於只能在叢集內存取的服務,GKE 的資料層 (
kube-proxy或Cilium) 會做為負載平衡器。它會將傳入流量平均分配到多個健康狀態良好的 Pod,防止過載並確保高可用性。 - 外部 Service:對於需要從叢集外部存取的 Service,GKE 會佈建 Google Cloud 負載平衡器。這些負載平衡器包括用於公開 網際網路網路連線能力的外部 Google Cloud 負載平衡器,以及用於虛擬私有雲網路 內存取的內部 Google Cloud 負載平衡器。這些負載平衡器會將流量分配到叢集中的節點。接著,各節點上的資料層會進一步將流量轉送至適當的 Pod。
無論是內部或外部情境,服務探索都會持續更新各項 Service 的可用 Pod 清單。這項持續更新作業有助於確保資料層 (適用於內部服務) 和 Google Cloud 負載平衡器 (適用於外部服務) 只會將流量導向健康狀態良好的執行個體。
服務探索的用途
以下是服務探索的常見用途:
- 微服務架構:在微服務架構中,應用程式通常由許多較小的獨立服務組成,這些服務需要相互互動。服務探索功能可讓這些應用程式互相尋找及交換資訊,即使叢集規模調整時也一樣。
- 啟用零停機時間部署作業,並提高彈性:服務探索可協助應用程式進行零停機時間更新,包括控管推出作業和初期測試部署。這項功能會自動偵測新的服務版本,並將流量轉移至這些版本,有助於減少部署期間的停機時間,確保使用者順利轉換。服務探索也能提升韌性。當 Pod 在 GKE 中故障時,系統會部署新的 Pod,而服務探索會註冊新的 Pod 並將流量重新導向至該 Pod,這有助於盡可能減少應用程式停機時間。
服務探索的運作方式
在 GKE 中,應用程式通常由多個 Pod 組成,這些 Pod 需要互相尋找並通訊。服務探索會使用網域名稱系統 (DNS) 提供這項功能。就像您使用 DNS 尋找網際網路上的網站一樣,GKE 叢集中的 Pod 會使用 DNS,透過 Service 名稱尋找並連線至 Service。無論 Pod 在叢集中的何處執行,都能有效互動,應用程式也能使用一致的服務名稱 (而非不穩定的 IP 位址) 進行通訊。
Pod 如何執行 DNS 解析
GKE 叢集中的 Pod 會結合自動產生的 DNS 記錄和本機 DNS 設定,解析 Service 和其他 Pod 的 DNS 名稱。
服務 DNS 名稱
建立 Kubernetes Service 時,GKE 會自動為其指派 DNS 名稱。這個名稱採用可預測的格式,叢集中的任何 Pod 都能使用這個名稱存取 Service:
<service-name>.<namespace>.svc.cluster.local
預設叢集網域為 cluster.local,但您可以在建立叢集時自訂網域。舉例來說,預設命名空間中名為 my-web-app 的 Service,其 DNS 名稱會是 my-web-app.default.svc.cluster.local。
/etc/resolv.conf 的角色
如要解析這些 DNS 名稱,Pod 會依賴其 /etc/resolv.conf 檔案。這個設定檔會指示 Pod 將 DNS 查詢傳送至哪個名稱伺服器。這個檔案中列出的名稱伺服器 IP 位址,取決於 GKE 叢集啟用的特定 DNS 功能。下表列出 Pod 根據設定使用的名稱伺服器 IP:
| Cloud DNS for GKE | NodeLocal DNSCache | `/etc/resolv.conf` 名稱伺服器值 |
|---|---|---|
| 已啟用 | 已啟用 | `169.254.20.10` |
| 已啟用 | 已停用 | `169.254.169.254` |
| 已停用 | 已啟用 | `kube-dns` Service IP 位址 |
| 已停用 | 已停用 | `kube-dns` Service IP 位址 |
這項設定可確保 Pod 的 DNS 查詢導向正確的元件:
- NodeLocal DNSCache:在節點上提供快速的本機查詢。
- 中繼資料伺服器 IP (
169.254.169.254):在未啟用 NodeLocal DNSCache 的情況下,啟用 GKE 適用的 Cloud DNS 時使用。DNS 查詢會導向這個 IP 位址,Cloud DNS 會使用這個位址攔截及處理 DNS 要求。 kube-dnsService IP 位址:停用 Cloud DNS for GKE 時,用於標準叢集內解析。
GKE 中的 DNS 架構
GKE 提供彈性的服務探索架構,主要使用 DNS。下列元件會共同運作,解析叢集內的 DNS 查詢:
kube-dns:GKE Standard 叢集的預設叢集內 DNS 供應商。它會以kube-system命名空間中 Pod 的代管部署形式執行,並監控 Kubernetes API 是否有新的 Service,以建立必要的 DNS 記錄。- Cloud DNS: Google Cloud的全代管 DNS 服務。這項服務是
kube-dns的替代方案,具備高度擴充性和可靠性,也是 GKE Autopilot 叢集的預設 DNS 供應商。 NodeLocal DNSCache:可提升 DNS 查詢效能的 GKE 外掛程式。它會在叢集的每個節點上執行 DNS 快取,並與kube-dns或 Cloud DNS 搭配運作,在本機提供 DNS 查詢服務,進而縮短延遲時間,並減輕叢集中央 DNS 供應商的負載。如果是 GKE Autopilot 叢集,系統預設會啟用NodeLocal DNSCache,且無法覆寫。- 自訂
kube-dns部署作業:這類部署作業可讓您部署及管理自己的kube-dns執行個體,進一步控管kube-dns設定和資源。
選擇 DNS 供應商
下表匯總 GKE 提供的 DNS 供應商,包括其功能和選擇時機:
| 提供者 | 功能與特色 | 選用時機 |
|---|---|---|
| `kube-dns` | Service 和 Pod 的叢集內 DNS 解析。 | 所有具備標準網路需求的叢集。新版 `kube-dns` 適用於小型和大型叢集。 |
| Cloud DNS | 進階 DNS 功能 (私人區域、流量引導、全域負載平衡),以及與其他 Google Cloud 服務整合。 | 在外部公開服務、多叢集環境,或 DNS 查詢率 (QPS) 偏高的叢集。 |
| 自訂 `kube-dns` Deployment | 可進一步控管設定和資源分配,並有機會使用其他 DNS 供應商。 | 大型叢集或特定 DNS 需求,需要更積極地調度資源,或精細控管資源分配。 |
單一叢集外的服務探索
您可以使用下列方法,將服務探索範圍擴展至單一 GKE 叢集以外:
Cloud DNS 範圍
使用 Cloud DNS 做為叢集 DNS 的叢集,可在下列三種範圍內運作:
- 叢集範圍:這是 Cloud DNS 的預設行為。在這個模式中,Cloud DNS 的功能等同於
kube-dns,專門為叢集內的資源提供 DNS 解析。DNS 記錄只能從叢集內解析,且遵循標準 Kubernetes Service 結構定義:<svc>.<ns>.svc.cluster.local。 - 附加虛擬私有雲範圍:這項選用功能可擴充叢集範圍,讓無頭 Service 可從同一虛擬私有雲網路中的其他資源解析,例如 Compute Engine VM 或使用 Cloud VPN 或 Cloud Interconnect 連線的地端部署用戶端。
- 虛擬私有雲範圍:採用這項設定時,叢集 Service 的 DNS 記錄可在整個虛擬私有雲網路中解析。這表示任何位於相同虛擬私有雲或連線至該虛擬私有雲 (透過 Cloud VPN 或 Cloud Interconnect) 的用戶端,都能直接解析 Service 名稱。
如要進一步瞭解虛擬私有雲範圍 DNS,請參閱「將 Cloud DNS 用於 GKE」。
多叢集 Service
多叢集服務 (MCS) 可在多個 GKE 叢集之間啟用服務探索和流量管理功能。MCS 可讓您建構跨叢集的應用程式,同時維持統一的服務體驗。
MCS 會運用以 DNS 為基礎的服務探索功能,連結不同叢集的 Service。建立 MCS 執行個體時,系統會產生 <svc>.<ns>.svc.clusterset.local 格式的 DNS 記錄。這些記錄會解析為各個參與叢集中 Service 端點的 IP 位址。
當某個叢集中的用戶端存取 MCS 時,系統會將要求轉送至任何參與叢集中,最接近的可用端點。這項流量分配作業是由每個節點上的 kube-proxy (或 GKE Dataplane V2 中的 Cilium) 管理,有助於確保叢集間的通訊和負載平衡效率。
Service Directory for GKE
Service Directory for GKE 提供統一的註冊資料庫,可跨 Kubernetes 和非 Kubernetes 部署項目進行服務探索。Service Directory 可以在單一註冊資料庫中,同時註冊 GKE 和非 GKE 服務。
如果您有下列任一需求,Service Directory 會特別實用:
- Kubernetes 和非 Kubernetes 應用程式可透過單一登錄檔互相探索。
- 代管服務探索工具。
- 可儲存服務的中繼資料,供其他用戶端存取。
- 可設定各項服務的存取權限。Service Directory 服務可透過 DNS、HTTP 和 gRPC 解析。Service Directory 與 Cloud DNS 整合,可填入與 Service Directory 中服務相符的 Cloud DNS 記錄。
詳情請參閱「設定 GKE 的 Service Directory」。
最佳化 DNS 效能和最佳做法
為確保服務探索可靠且有效率,尤其是在大規模或高流量叢集中,請考慮採用下列最佳做法和最佳化策略。
使用 NodeLocal DNSCache 提高效能
如果叢集的 Pod 密度很高,或應用程式會產生大量 DNS 查詢,您可以啟用 NodeLocal DNSCache 來提高 DNS 查詢速度。NodeLocal DNSCache 是 GKE 外掛程式,可在叢集的每個節點上執行 DNS 快取。當 Pod 發出 DNS 要求時,要求會傳送至同一節點上的快取。這個方法可減少延遲時間和網路流量。
如要進一步瞭解如何啟用及設定這項功能,請參閱「設定 NodeLocal DNSCache」。
擴充 DNS 供應商
如果您使用 kube-dns,且遇到間歇性逾時問題 (尤其是在高流量期間),可能需要調整 kube-dns 副本數量。kube-dns-autoscaler 會根據叢集中的節點和核心數量調整副本數量,您也可以調整參數,更快部署更多副本。
如需詳細操作說明,請參閱「設定自訂 kube-dns 部署作業」。
常見的最佳做法
- 選取適當的 DNS 供應商:根據叢集需求選擇 DNS 供應商。如果工作負載的 QPS 較高、環境有多個叢集,或需要與更廣泛的虛擬私有雲網路整合,建議使用 Cloud DNS。新版
kube-dns適用於各種規模的叢集,從小型到大型叢集,只要有標準叢集內服務探索需求,都可使用。 - 避免在 Spot VM 或先占 VM 上執行
kube-dns:請勿在 Spot VM 或先占 VM 上執行kube-dns等重要系統元件,確保叢集的 DNS 服務穩定。節點意外終止可能會導致 DNS 解析問題。 - 使用清楚且具描述性的 Service 名稱:為 Service 採用一致且有意義的命名慣例,讓應用程式設定更容易閱讀及維護。
- 使用命名空間整理:使用 Kubernetes 命名空間將相關服務分組。這種做法有助於避免命名衝突,並改善叢集資源組織。
- 監控及驗證 DNS:定期監控 DNS 指標和記錄,在潛在問題影響應用程式前找出問題。定期從 Pod 內測試 DNS 解析,確保服務探索功能正常運作。
後續步驟
- 閱讀 GKE 叢集 DNS 的總覽。
- 請參閱「Service 和 Pod 的 DNS」,概略瞭解 DNS 在 Kubernetes 叢集中的使用方式。
- 瞭解如何設定 NodeLocal DNSCache。
- 瞭解如何設定自訂
kube-dns部署作業。