Google Distributed Cloud ハードウェアを注文する前に、このページで説明する Distributed Cloud のインストール要件を満たす必要があります。
ハードウェア構成を計画する
ハードウェアを注文する前に、ネットワーク管理者が Google と協力して、Distributed Cloud インストールのハードウェア構成を計画する必要があります。
ビジネス要件に基づいて、ネットワーク管理者は次の情報を特定して提供する必要があります。
- 各バリエーションのラック数
- 電源タイプ(AC または DC)
Distributed Cloud は、次のいずれかのバリエーションで提供されます。
| GDC Edge ラック(GPU なし) | GDC Edge ラック(GPU 付き) | GDC Edge サーバー(中) | GDC Edge サーバー(大) | |
|---|---|---|---|---|
| 構成 | ローカル SSD ストレージ、ToR スイッチ 2 台、専用ラックを備えた非 GPU サーバー 6 台 | ローカル SSD ストレージ、ToR スイッチ 2 台、専用ラックを備えた GPU 対応サーバー 6 台 | ローカル SSD ストレージを備えたスタンドアロン非 GPU サーバー 3 台 | ローカル SSD ストレージを備えたスタンドアロン非 GPU サーバー 3 台 |
| 目的 | 大規模な汎用コンピューティングに最適 | AI/ML またはグラフィックを多用するワークロードに最適 | 中規模の汎用コンピューティングに最適 | 中規模の汎用コンピューティングに最適 |
| 推定料金 | 料金 | 料金 | 料金 | 料金 |
| CPU | 6 x 96 vCPU(合計 576 vCPU) | 6 x 96 vCPU(合計 576 vCPU) | 3 x 32 vCPU(合計 96 vCPU) | 3 x 64 vCPU(合計 192 vCPU) |
| GPU | なし | デュアル NVIDIA Tesla T4 GPU 6 基(合計 12 基の GPU) | なし | なし |
| RAM | 6 x 256 GB(合計 1,536 GB) | 6 x 256 GB(合計 1,536 GB) | 3 x 64 GB(合計 192 GB) | 3 x 128 GB(合計 384 GB) |
| ストレージ | 6 x 4 TB SSD(合計 24 TB) | 6 x 4 TB SSD(合計 24 TB) | 1.6 TB SSD 3 台(合計 4.8 TB) | 3 × 3.2 TB SSD(合計 9.6 TB) |
| 電力 | AC または DC | AC のみ | AC のみ | AC のみ |
プレミアム サポートに申し込む
Distributed Cloud には プレミアム サポートが必要です。現在プレミアム サポートをご利用でない場合は、Distributed Cloud を使用するためにプレミアム サポートを購入する必要があります。
Google Cloud 情報を提供する
ハードウェアを注文する際に、該当する場合は、以下の情報を Google に提供する必要があります。
- 組織 ID Google Cloud
- 既存の Google Cloud プロジェクトの一部として Distributed Cloud マシンをプロビジョニングするか、新しいGoogle Cloud プロジェクトを使用するか
- ターゲット Google Cloud プロジェクトの ID(既存の Google Cloud プロジェクトの一部としてプロビジョニングする場合)
- Distributed Cloud ゾーンの望ましい数
配送経路と設置場所
配送経路と設置場所が Distributed Cloud Rack ハードウェアに対応できることを確認するため、Google は両方を正確に描写した写真や図面を求めることがあります。また、配送前にサイトの調査を行うこともあります。
配送経路に障害物がないこと、勾配が 3% 未満であることが必要です。設置場所が荷積みドックや建物の入り口と同じ階にない場合は、エレベーターへのアクセスを提供する必要があります。
すべての出入り口、廊下、エレベーターは、梱包された Distributed Cloud Rack ハードウェアの総重量と寸法に対応している必要があります。
Google サービス技術者が、配送経路全体で設置場所までアクセスできるようにする必要があります。
設置場所が一般的なデータセンターでない場合は、ハードウェアを注文する前に設置場所の寸法図を提供して、ラックを安全に設置して電源を投入できるようにする必要があります。
Distributed Cloud Servers は標準のラックマウント型であり、特別な配送規定は必要ありません。
必要な容量
Distributed Cloud ラックのハードウェアは、次の寸法で梱包されています。
| ディメンション | 値(ヤードポンド法) | 値(指標) |
|---|---|---|
| 高さ | 87 インチ | 221 cm |
| 奥行き | 60 インチ | 152 cm |
| 幅 | 40 インチ | 102 cm |
Distributed Cloud ラックのハードウェアの寸法は次のとおりです。
| ディメンション | 値(ヤードポンド法) | 値(指標) |
|---|---|---|
| 高さ | 80 インチ | 203 cm |
| 奥行き | 48 インチ | 122 cm |
| 幅 | 24 インチ | 61 cm |
地域の管轄区域または施設で Distributed Cloud ラックのブレースが必要な場合は、特別な耐震ブレース ハードウェアが必要になることがあります。Distributed Cloud ラックは、ラックを床に取り付けるために再利用できるブラケットでクレートに固定された状態で出荷されます。ただし、これらのブラケットは、地域のブレース要件を満たしていない可能性があります。
Distributed Cloud Server ハードウェアのサイズは、マシンあたり次のとおりです。
| ディメンション | 値(ヤードポンド法) | 値(指標) |
|---|---|---|
| 高さ | 1.7 インチ | 4.3 cm |
| 奥行き | 19 インチ | 48 cm |
| 幅 | 19 インチ | 48 cm |
重み
Distributed Cloud ラックの総重量は次のとおりです。
| ラック フィル | 総重量 |
|---|---|
| 一般的 | 900 lbs(408 kg) |
| 最大 | 1,300 ポンド(590 kg) |
エレベーターを含む搬入経路と設置場所は、現地の建築基準法を完全に遵守したうえで、この重量を安全に支える必要があります。
各 Distributed Cloud Server マシンの重量は 9 kg(20 ポンド)です。
電源
Distributed Cloud ハードウェアには、50 Hz または 60 Hz の単相または三相の交流電源、または -48 V の直流の通信事業者スタイルの正接地電源が必要です。ハードウェアを注文する際に、必要な電源のタイプを指定する必要があります。
設置場所には、地域の建築基準法に準拠して電力を供給する必要があります。これには、次の作業が含まれます。
- ケーブル配管の設置
- 必要なケーブルの配線
- 配線を電気パネルに接続する
- 電源を入れる
電気工事はすべて、認定電気技師が行う必要があります。
ラインの仕様
高可用性を確保するには、デプロイするバリアントに基づいて、次の数の独立した電源ラインを供給する必要があります。
| パターン | ラインの要件 |
|---|---|
| AC 電源(GDCE ラック) | 専用の接地接続を備えた 2 本の独立した電源ライン |
| DC 電源(GDCE ラック) | 専用の戻り線と専用のアース接続を備えた 4 本の独立した供給ライン |
| AC 電源(GDCE サーバー) | マシンごとに専用の接地接続を備えた 1 つの独立した電源ライン。 |
すべての電源コンセントは、設置場所から 1.8 m 以内の場所に設置する必要があります。
Distributed Cloud ラックの AC 電源仕様
Distributed Cloud Racks に供給される AC 電源の場合、すべての電源ラインは次の仕様のいずれかを満たしている必要があります。
| フェーズ | 電圧 | 電流 | コネクタ |
|---|---|---|---|
| 単相 | 208 V、50/60 Hz | 30A | NEMA L6-30P |
| 単相 | 230 V、50/60 Hz | 32A | IEC 60309 2P+2E 6Hr |
| 三相 Y 結線 | 120 V/208 V、50/60 Hz | 30A | NEMA L21-30P |
| 3 相デルタ | 208 V、50/60 Hz | 60A | IEC 60309 3P+G 9Hr |
| 3 相デルタ | 208 V、50/60 Hz | 50A | CS8365 50A 3P+G |
| 三相 Y 結線 | 240 V/410 V、50/60 Hz | 16A | IEC 60309 3P+N+PE 6Hr |
| 三相 Y 結線 | 230 V/400 V、50/60 Hz | 32A | IEC 60309 3P+N+PE 6Hr |
Distributed Cloud Racks の DC 電源仕様
Distributed Cloud ラックに供給される DC 電源の場合、すべての電源ラインは、次の構成の正接地 -48V Telco スタイルのラインである必要があります。
- 2 つ以上の冗長 DC 電源から供給される 4 つの供給ライン
- 対応する冗長 DC 電源に供給する 4 本のリターン ライン
- 1 個の専用接地ボンド
行は次の仕様を満たしている必要があります。
| 線の種類 | 電圧 | 電流 | コネクタ |
|---|---|---|---|
| 供給 | -44V ~-60V | 125A | 2 穴 3/8 インチ、1 インチ間隔の圧縮ラグ |
| Return | -44V ~-60V | 125A | 2 穴 3/8 インチ、1 インチ間隔の圧縮ラグ |
| Ground | なし | 電気工事士に相談する | 1 穴 1/4 インチ圧縮ラグ |
Distributed Cloud Servers の AC 電源の仕様
各 Distributed Cloud Server マシンに供給される AC 電源については、すべての電源ラインが、Distributed Cloud Server マシンごとに 100 ~ 240 V、50 または 60 Hz の単相電力を供給できる必要があります。Distributed Cloud Server マシンの電源は自動切り替えです。
消費電力
Distributed Cloud Rack の消費電力は、選択した構成、GPU の有無、CPU 負荷などの要因に基づいて 3,000 W から 5,500 W の範囲になります。起動時のピーク電力消費量は一時的に 5,900 W に達することがあります。
Distributed Cloud Server マシンの一般的な消費電力は 800 W です。
バックアップ電源
どちらのバリアントでも、各独立電源ラインには、バッテリー システムの場合は 20 分以上、慣性システムの場合は 15 秒以上、Distributed Cloud ハードウェアに電力を継続的に供給できる独立した無停電電源装置(UPS)が必要です。
UPS バックアップに加えて、UPS ユニットの充電と Distributed Cloud ハードウェアへの電力供給を 4 時間以上行うのに十分な容量の緊急用発電機バックアップも用意する必要があります。Distributed Cloud ハードウェアは UPS ユニットに接続する必要があります。UPS ユニットは、自動転送スイッチ(ATS)または同様のシステムを使用して、発電機バックアップに接続する必要があります。このシステムでは、緊急転送を容易にするために人手を介する必要はありません。
古い DC プラントなど、発電機バックアップのないバッテリー UPS システムは、Distributed Cloud に 4 時間以上電力を供給できる十分な容量を備えている必要があります。
冷房
Distributed Cloud ハードウェアは空冷式で、動作には温度管理された環境が必要です。設置場所では、Distributed Cloud ハードウェアを動作させるのに十分な冷却を提供する必要があります。
設置場所には、次の環境条件が必要です。
| 環境要因 | 必要な範囲 |
|---|---|
| Temperature(温度) | 15°C ~ 31°C |
| 相対湿度 | 30 ~ 70%(結露なきこと) |
周囲温度と相対湿度の変動は、以下を超えてはなりません。
- 周囲の温度: 1 時間あたり +/- 5°C
- 相対湿度: 1 時間あたり +/- 5%
これらのガイドラインは、標高 10,000 フィート(3,050 m)未満の設置に適用されます。標高の高い場所では、暖房換気空調システムの専門業者と Google の担当者にご相談ください。推奨範囲外の極端な変動は、保護シャットダウンや Distributed Cloud ハードウェアの永久的な損傷につながる可能性があります。
Distributed Cloud ラックは、1 時間あたり最大 13,650 BTU の熱を発生させ、強制換気を使用して設置されたハードウェアから熱を除去します。ラックの前面は冷気の取り入れ口として機能し、ラックの背面は熱気の排出口として機能します。十分なエアフローを確保するため、ラックの前面と背面に 1.2 メートルの空きスペースを設ける必要があります。可能であれば、専用の有孔タイルまたはレジスタの前にラックを設置します。
Distributed Cloud Server は通常、1 時間あたり約 3,000 BTU の熱を発生させ、強制換気を使用してシャーシから熱を除去します。Google は、上記のようなベスト プラクティスに従って、Distributed Cloud Server マシンの適切な冷却を確保することを強く推奨します。
Distributed Cloud では、商用または工業用の HVAC 機器を恒久的に設置して、デプロイ サイトの空気を継続的に循環、調整、フィルタリングする必要があります。必要な環境条件を維持しないと、Distributed Cloud ハードウェアが長期的に損傷し、Distributed Cloud デプロイの信頼性が低下する可能性があります。
冷却インフラストラクチャは、次のガイドラインを満たしている必要があります。
- すべての HVAC 機器には、バックアップ電源と、停電後に自動的に再起動する機能が必要です。
- エア ハンドラー、空調設備、コンデンサ、ポンプ、冷却塔、チラー、その他の HVAC コンポーネントには、適切な冗長性が必要です。
- 暖房換気空調設備の動作性能を一定に保ち、必要な範囲内に維持するには、定期的に点検とメンテナンスを行う必要があります。
- Distributed Cloud ハードウェアを直射日光やその他の種類の赤外線にさらさないでください。ハードウェアの検証済み温度プロファイルが変更されます。
- Distributed Cloud ハードウェアを、未調整で未ろ過の空気にさらさないでください。短時間の曝露でも、ほこりが蓄積して重要なコンポーネントへの空気の流れが制限される可能性があります。
- 外気冷房システムは、専門家が設計して設置したものであれば使用できます。ただし、前述の熱要件を満たしている必要があります。
ネットワーキング
Distributed Cloud Rack には、ローカル ネットワーク上の 2 つの冗長ネットワーク デバイス間で分割された 4 つの LC シングルモード ファイバー接続が必要です。100GBASE-LR4 リンクと 10GBASE-LR リンクのみがサポートされています。
Distributed Cloud Server マシンには、トップオブラック(ToR)スイッチへの 2 つのギガビット イーサネット接続(1 つはインバンド、1 つはアウトオブバンド)が最低限必要です。冗長性を確保するため、マシンごとに 2 つのインバンド接続を構成することをおすすめします。
Distributed Cloud ハードウェアを注文するときに、IP アドレス範囲やファイアウォール構成などのネットワーク要件を指定する必要があります。光伝送回線では、最適なルーティング プロトコルのコンバージェンスを実現するために、障害伝播を有効にします。
注文する前に、ネットワーク管理者は Google と協力して、Distributed Cloud インストールのネットワーク構成を計画する必要があります。
詳細については、Distributed Cloud ハードウェアをご覧ください。
アドレス ブロックを割り振る
Distributed Cloud では、ローカル ネットワークで次のアドレス ブロックを割り振る必要があります。
Distributed Cloud ラックのアドレス ブロック
次の表に、Distributed Cloud Racks に必要なアドレス ブロックを示します。
| ネットワーク コンポーネント | 割り当ての要件 |
|---|---|
| ローカル ネットワークへのピアリング リンク | 4 つの一般公開または非公開の /31 CIDR ブロック。 4 つの /31 CIDR ブロック、VLAN ID、これらの 4 つのアドレス ブロックをカバーする 2 つの BGP ASN を指定できます。1 つの ASN は Distributed Cloud ToR スイッチとピアリングするローカル ルーター用で、もう 1 つの ASN は Distributed Cloud スイッチ用です。 |
| ToR スイッチ管理サブネットワーク | 少なくとも 1 つの /30 CIDR ブロック(パブリックまたは RFC 1918)。 |
| 分散型クラウド マシン管理サブネットワーク | 少なくとも 1 つの /27 CIDR ブロック(パブリックまたは RFC 1918)。 |
| Distributed Cloud ノードのサブネットワーク | 少なくとも 1 つの /27 CIDR ブロック(パブリックまたは RFC 1918)。 |
Distributed Cloud Servers のアドレス ブロック
次の表に、Distributed Cloud Servers に必要なアドレス ブロックを示します。
| ネットワーク コンポーネント | 割り当ての要件 |
|---|---|
| 分散型クラウド マシン管理サブネットワーク | ローカル ネットワーク VLAN 内のマシンごとに 1 つの IP アドレス(パブリックまたは RFC 1918)。 |
| Distributed Cloud ノードのサブネットワーク | ローカル ネットワーク VLAN 内のマシンごとに 1 つの IP アドレス(パブリックまたは RFC 1918)。 |
| Distributed Cloud ロードバランサ プール | ローカル ネットワーク VLAN のマシンごとに 6 個の IP アドレス(パブリックまたは RFC 1918)。 |
マシン管理サブネットワークとノード サブネットワークの IP アドレスは連続している必要があります。デフォルト ゲートウェイの IP アドレスとローカル ネットワークのサブネット マスクも指定する必要があります。
必要なアドレス ブロックを割り当てる方法
Distributed Cloud ハードウェアを注文する際に、ネットワーク管理者は上記の CIDR ブロック割り当て情報を提供する必要があります。これらの値は、Distributed Cloud のデプロイ後に変更できません。
ノード、マシン管理、ToR スイッチの CIDR ブロックは、ローカル ネットワーク上のルーティング可能なサブネットである必要があります。これらは、プライベート RFC 1918 範囲のサブネットワークまたはパブリック ネットワークにできます。ピアリング エッジルーターで適切な BGP セッションを構成して、Distributed Cloud ノード サブネットワーク、Distributed Cloud マシン管理サブネットワーク、ToR スイッチ管理サブネットワークの下位 2 つの /32 IP アドレスのルートを受け入れる必要があります。
CIDR ブロックは、Distributed Cloud ラックごとに割り当てられます。Distributed Cloud クラスタを作成すると、Distributed Cloud は、クラスタ内のノードの機能と可用性に基づいて、指定されたノード CIDR ブロック内の IP アドレスにノードを自動的に割り当てます。
マルチラックの Distributed Cloud インストールでは、各 Distributed Cloud ラックに一意の CIDR ブロックを指定する必要があります。各ラックはネットワークに個別に接続されます。
Distributed Cloud のインストールをマシンで拡張する場合は、初期の Distributed Cloud の注文で、これに必要な追加の IP アドレスを考慮する必要があります。また、ワークロードとGoogle Cloud間の VPN 接続で使用されるゲートウェイ アドレスやフローティング アドレスなど、オーバーヘッド IP アドレスも考慮する必要があります。 Google Cloud 営業担当者と協力して、ビジネス要件に基づいて最適なノード CIDR ブロック割り当てを決定します。
Distributed Cloud のインストールが完了したら、Distributed Cloud Pod とサービスのネットワーク アドレスの割り振りで説明されているように、Distributed Cloud Pod とサービスのネットワーク IP アドレスを割り振る必要があります。
ファイアウォールを構成する
Distributed Cloud では、次のタイプのネットワーク トラフィックを許可するようにファイアウォールを構成する必要があります。
- Distributed Cloud の管理とクラスタ コントロール プレーン トラフィック
- Distributed Cloud ワークロード トラフィック
Distributed Cloud の管理とクラスタ コントロール プレーンのトラフィック
Distributed Cloud では、ローカル ネットワークで次のポートを開く必要があります。Distributed Cloud では、管理とクラスタ コントロール プレーン トラフィックのために、インターネット経由で Google へのアウトバウンド接続にこれらのポートが必要です。このアウトバウンド トラフィックを追跡し、対応する戻りのインバウンド トラフィックを Distributed Cloud に通過させるステートフル ファイアウォールを使用する必要があります。
| 関数 | 共有元のサブネットワーク | プロトコル | ポート |
|---|---|---|---|
| ドメイン ネーム システム(DNS) | ToR スイッチ管理、Distributed Cloud マシン管理、Distributed Cloud ノード | TCP、UDP | 53 |
| ネットワーク タイム プロトコル(NTP) | ToR スイッチ管理、Distributed Cloud マシン管理、Distributed Cloud ノード | UDP | 123 |
| スイッチ認証用のターミナル アクセス コントローラ アクセス制御システム(TACACS) | ToR スイッチの管理 | TCP | 3535 |
| 管理用 VPN | ToR スイッチ管理、Distributed Cloud マシン管理 | UDP | 443 |
| ブートストラップおよび管理用 API | ToR スイッチ管理、Distributed Cloud マシン管理 | TCP | 443 |
| リモート Kubernetes コントロール プレーン | Distributed Cloud マシンの管理、Distributed Cloud ノード | TCP | 6443 |
| Kubernetes Konnectivity プロキシ | Distributed Cloud マシンの管理、Distributed Cloud ノード | TCP | 8132、8133、8134 |
| モニタリング サービス | Distributed Cloud マシンの管理、Distributed Cloud ノード | TCP | 443 |
| ロギング サービス | Distributed Cloud マシンの管理、Distributed Cloud ノード | TCP | 443 |
| Cloud VPN と Virtual Private Cloud データプレーン | Distributed Cloud ノード | UDP(ESP、IKE) | 500、4500 |
Distributed Cloud ワークロード トラフィック
ネットワーク管理者は、Distributed Cloud クラスタにデプロイされたワークロードとの間のトラフィックを許可するように、追加のファイアウォール ルールも構成する必要があります。
NAT ゲートウェイの背後に Distributed Cloud をデプロイし、WAN ゲートウェイにインバウンド UDP トラフィックをフィルタリングまたはブロックする追加のファイアウォール ルールが構成されている場合、Distributed Cloud で必要な Cloud VPN 接続が影響を受ける可能性があります。このような場合は、Cloud VPN IP アドレス範囲からの上り(内向き)の Cloud VPN UDP トラフィックを許可する必要があります。
たとえば、送信元ポートが 500 または 4500(IKE/ESP)と一致する送信元 IP アドレス範囲 35.242.0.0/17、35.220.0.0/17、34.157.0.0/16 からのインバウンド UDP トラフィックを許可する必要があります。ファイアウォール ソリューションでより正確な構成が必要な場合は、宛先 IP アドレス範囲を Distributed Cloud ノード サブネットワークの IP アドレス範囲と一致するように設定します。ファイアウォールが NAT ゲートウェイの上流にある場合は、宛先 IP アドレス範囲を NAT ゲートウェイのパブリック IP アドレスに設定します。
オンサイト メンテナンス
Google は Distributed Cloud ハードウェアをリモートでモニタリングします。問題が発生した場合は、サポートにお問い合わせのうえ、チケットを提出してください。ハードウェアの故障が検出された場合は、設置場所への訪問をスケジュールします。Google 認定の技術者がお客様と連携して訪問日を調整し、必要な修理を行います。