必要條件

本文說明如何在 Google Cloud的 VMware 解決方案中部署 VMware Cloud Foundation (VCF) 之前,先準備 Google Cloud 專案。

必要的專案設定包括存取第 2 層網路許可清單、Compute Engine 配額、網路、DNS、主機名稱、密碼和安全性政策。完成這些步驟後,裸機 ESXi 執行個體就能使用有效的 TLS 憑證啟動,並透過 VLAN 標記的子網路通訊。如需服務總覽,請參閱「VMware solution on Google Cloud 總覽」。

要求加入第 2 層網路許可清單

如要在 VMware 解決方案中支援以 VLAN 為基礎的網路,虛擬私有雲 (VPC) 網路中的子網路必須具備自訂 MAC 學習和位址解析通訊協定 (ARP) 廣播功能。具體來說,每個節點子網路都必須使用 --resolve-subnet-mask=ARP_BROADCAST_PRIMARY_RANGE_WITH_LEARNING 旗標,將「Resolve Subnet Mask」(解析子網路遮罩) 屬性設為「Broadcast primary range only with learning」(僅廣播主要範圍並學習)。在 Google Cloud 控制台中,依序點選「VMware Engine」>「Self-managed」(自行管理),會顯示 警告橫幅,並停用部署動作,直到支援團隊將您的專案 加入許可清單。如要進一步瞭解 VLAN 網路和自訂 MAC 學習,請參閱「第 2 層模擬:ARP 廣播和自訂 MAC 學習」。

如要要求支援團隊將專案加入第 2 層網路許可清單,請完成下列步驟:

  1. 前往 Google Cloud 控制台的「Support」(支援) 頁面:

    前往支援頁面

  2. 建立客服案件,並填寫下列欄位值:

    • 產品:選取「VMware 解決方案在 Google Cloud 上的運作方式」。
    • Priority:選取「P2」。
    • Category:選取「網路連線」。
    • Business Impact:選取「General Technical question」。
    • 提供更多詳細資料:輸入 Allowlist L2 network connectivity for my project,以及專案 ID、專案編號,以及部署作業的目標區域和可用區。
  3. 提交客服案件。

  4. 支援團隊確認您的專案已加入許可清單後,請前往 Google Cloud 控制台,依序點選 「VMware Engine」>「Self-managed」(自行管理)。確認許可清單警告橫幅不再顯示,且部署動作已啟用。

確認配額和權限

部署基礎架構前,請確認使用者帳戶或佈建服務帳戶具備必要的 Identity and Access Management (IAM) 角色,以及足夠的 Compute Engine 配額。

必要的角色

如要取得佈建 VMware 解決方案基礎架構所需的權限,請要求管理員在目標 Google Cloud 專案中授予您下列 IAM 角色:

  • 佈建裸機執行個體、配置政策、虛擬私有雲網路、第 2 層廣播子網路、可用區網路端點群組 (NEG) 和內部負載平衡器:Compute 管理員 (roles/compute.admin)
  • 管理 Cloud DNS 中的私人轉送和反向查詢區、傳入伺服器政策,以及 A 和 PTR 記錄:DNS 管理員 (roles/dns.admin)
  • 執行 VMware 解決方案工具包時,從 Secret Manager 讀取 ESXi 和 VCF 密碼:Secret Manager 密鑰存取者 (roles/secretmanager.secretAccessor)

如要進一步瞭解如何授予角色,請參閱「管理專案、資料夾和組織的存取權」。

您或許也能透過自訂角色或其他預先定義的角色,取得必要權限。

驗證區域配額

佈建裸機節點或建立叢集前,請確認專案有足夠的區域和全域 Compute Engine 配額。請先將該區域中所有現有叢集的資源,加入下列增量值,再與專案配額進行比較:

配額指標 每個裸機節點所需的資源 3 節點叢集所需的資源
Z3 專用的「compute.googleapis.com/cpus_per_vm_family」 192 個 vCPU 3 × 192 = 576 個 vCPU
Z3 專用的「compute.googleapis.com/local_ssd_total_storage_per_vm_family」 72 TB 3 × 72 TB = 216 TB
compute.googleapis.com/hyperdisk_balanced_total_storage 128 GB 3 × 128 GB = 384 GB
compute.googleapis.com/resource_policies 將節點新增至現有叢集時,請設為 0 每個叢集 1 項分散配置政策
compute.googleapis.com/regional_backend_services_protocol_forwarding_fast_ha 新增節點或叢集時,如未新增設備,則為 0 每個新的 VCF 管理設備 VIP 或 NSX Edge 端點 1 個

如需必要配額的完整清單,以及如何查看或要求提高配額的操作說明,請參閱「配額與限制」。

規劃虛擬私有雲網路

佈建裸機 ESXi 節點之前,請確認虛擬私有雲網路架構符合下列需求:

  • 最大傳輸單位 (MTU):部署裸機節點前,請將主機虛擬私有雲網路 MTU 設為 8896 位元組,以支援巨型框架。設定 VMware vSphere Distributed Switch、VMkernel 轉接器和 NSX 設定檔,以符合 8896 個位元組。
  • 第 2 層廣播子網路:為未標記的 ESXi 管理 (MGMT) 子網路和 VLAN 標記的動態網路介面子網路,規劃不重疊的主要 IPv4 CIDR 範圍,大小為 /24 或更小。這些動態子網路會傳輸 vSAN、vMotion 和 NSX 通道端點 (NSX-TEP) 流量。使用 --resolve-subnet-mask=ARP_BROADCAST_PRIMARY_RANGE_WITH_LEARNING 旗標設定每個節點子網路,並在管理子網路上啟用 Private Google Access。
  • 專用標準子網路:在相同區域和虛擬私有雲網路中,佈建或找出沒有第 2 層 ARP 廣播的標準子網路。請將這個子網路用於 jumpbox VM 執行個體、Cloud DNS 傳入轉送 DNS_RESOLVER IP 位址,以及 Private Service Connect 區域性離線存放區端點 (GCE_ENDPOINT)。請勿將 DNS_RESOLVER 或 GCE_ENDPOINT 位址放在第 2 層 ARP 廣播子網路中。詳情請參閱「在第 2 層廣播子網路上使用 Cloud DNS 傳入轉送功能時,DNS 解析失敗」。
  • 防火牆規則:設定虛擬私有雲防火牆規則,允許虛擬私有雲子網路 CIDR 範圍內所有通訊埠和通訊協定的內部流量。如果您是從對等互連或混合式網路連線至 VCF 環境,請將這些 CIDR 範圍納入防火牆規則。

如需架構詳細資料,請參閱「底層虛擬私有雲網路、第 2 層 MAC 學習和 DNS」。

規劃 DNS 和必要節點主機名稱

VCF 需要正向 (A) 和反向 (PTR) DNS 解析,才能處理所有裸機 ESXi 主機、VCF 管理設備和叢集端點。規劃主機名稱和 IP 位址指派作業時,請遵守下列規定:

  • 指定不重複的完整網域名稱 (FQDN):為每個裸機 ESXi 執行個體提供不重複且有效的 FQDN,長度不得超過 64 個字元。在初始啟動期間,ESXi 會產生自行簽署的 X.509 TLS 憑證,其一般名稱 (CN) 屬性有 64 個字元的限制。如果 FQDN 超過 64 個字元,系統會改用簡短主機名稱,這可能會導致 VCF SSL 指紋和憑證驗證檢查失敗。在所選部署介面中指定各個節點的 FQDN:
    • 在 Google Cloud 控制台中,於每個節點的「Hostname」(主機名稱) 必填欄位中輸入 FQDN。
    • 在 Google Cloud CLI 中,執行 gcloud compute instances create 指令時,請使用 --hostname 旗標傳遞 FQDN。
    • 在 Terraform 中,設定網域字尾和節點名稱,讓每個執行個體在 hostname 屬性中收到有效的 FQDN。
  • 預先設定自訂或靜態 IP 位址的 DNS:如果您將「Ephemeral (Custom)」(暫時 (自訂)) 或預留的靜態 IPv4 位址指派給 ESXi 節點,請先設定正向和反向 DNS 查詢區域。請先建立對應的 A 和 PTR 記錄,再部署執行個體。預先設定這些記錄,可讓每個 ESXi 主機透過反向 DNS 解析其 FQDN,並在初始啟動時產生相符的 TLS 憑證。
  • 佈建自動臨時 IP 位址後同步處理 DNS:如果選取「Ephemeral (Automatic)」(臨時 (自動)) IPv4 位址,請建立或同步處理正向 (A) 和反向 (PTR) DNS 記錄。請在佈建裸機執行個體後,以及執行 VMware 解決方案工具包或 VCF 驗證前,立即更新這些記錄。

確認 Broadcom 密碼規定

請確認 VCF Installer 和 SDDC Manager 的 root 和本機使用者密碼,以及 ESXi root 密碼,符合 Broadcom 密碼複雜度規定。如果密碼強度不足或不符合規定,可能會導致工具包初始化或 VCF 啟動失敗。詳情請參閱 Broadcom 說明文件中的「VCF 元件的預設密碼規定」。

設定組織政策和 VPC Service Controls

VMware 解決方案中的裸機 ESXi 執行個體,會從 Google 提供的 ESXi 映像檔啟動,這些映像檔託管於 smve-prod-public-images 專案,專案編號為 999037279871。根據預設,您不需要進行任何額外設定。只有在組織強制執行信任的映像檔限制或 VPC Service Controls 服務範圍時,才套用下列設定:

  • 可信映像檔政策:如果組織強制執行 constraints/compute.trustedImageProjects 組織政策限制,請允許 projects/smve-prod-public-images 值,讓 Compute Engine 建立裸機開機磁碟。詳情請參閱 Compute Engine 說明文件中的「設定映像檔存取限制」。
  • VPC Service Controls 輸出規則:如果目標專案位於 service perimeter,請新增輸出規則,允許 compute.googleapis.com 作業至 projects/999037279871:

    - egressFrom:
        identityType: ANY_IDENTITY
      egressTo:
        operations:
        - serviceName: compute.googleapis.com
          methodSelectors:
          - method: "*"
        resources:
        - projects/999037279871
    

    詳情請參閱 VPC Service Controls 說明文件中的「輸出規則參考資料」。

後續步驟