GDC エアギャップでの MariaDB データベースのリファレンス アーキテクチャ

このリファレンス アーキテクチャは、Google Distributed Cloud(GDC)エアギャップに高可用性の顧客管理 MariaDB 12 データベースをデプロイして運用するためのコンセプト フレームワークを提供します。これにより、エンタープライズのお客様と早期アクセスのお客様は、堅牢なマルチゾーン仮想マシン(VM)の設定を使用して、重要なデータベース ワークロードを確実に維持できます。

GDC エアギャップは現在、クロスゾーン Kubernetes ストレッチ クラスタをサポートしていないため、このアーキテクチャは、3 つのアベイラビリティ ドメインにデプロイされた専用 VM に完全に依存して、継続的な運用を確保し、データ損失なしでゾーン全体の障害に耐えることができます。

特長と機能

  • マルチゾーンの復元性: 3 つの異なるアベイラビリティ ゾーンにデプロイされた復元性の高い 3 ノード構成。単一のインフラストラクチャ ゾーンの障害から保護します。
  • 自動化された高可用性とコンセンサス: 同期マルチマスター クラスタリングに Galera を使用し、スプリット ブレイン シナリオなしで自動障害検出、ノード コンセンサス、グローバル データ同期を実現します。
  • インテリジェントなトラフィック ルーティング: コロケーションされた HAProxy インスタンスが接続プーリングを管理し、トラフィックを厳密にルーティングします。書き込みオペレーション(ポート 3306 など)をアクティブなプライマリ ノードに転送し、読み取りオペレーション(ポート 3307 など)を同期されたレプリカ間でロード バランシングします。
  • グローバル ロード バランシング: プラットフォーム ネイティブの GDC グローバル L4 ロードバランサと統合して、クライアント アプリケーションに単一の安定した仮想 IP(VIP)を提供し、基盤となるノード トポロジを抽象化します。
  • データベース対応フェイルオーバー検証: 軽量のカスタム Python スクリプトまたは clustercheck などの OSS ソリューション(ポート 9200 で公開)を使用して、ロードバランサと HAProxy にヘルスチェックを提供し、トラフィックが正常で完全に同期されたノードにのみルーティングされるようにします。

アーキテクチャの原則

  • 同期多数決ベースのコンセンサス: 結果整合性よりも厳格なデータ整合性を優先します。Galera は、過半数の合意を必要とするクォーラムベースのモデルを適用し、ネットワーク パーティション中のデータ損失やスプリット ブレインのリスクを排除します。
  • 関心の分離: データベース レプリケーション レイヤ(Galera)を接続ルーティングとフェイルオーバー検出レイヤ(HAProxy と Python ヘルスチェック サービス)から分離します。
  • インフラストラクチャの最適化: エアギャップ環境向けに特別に設計されており、堅牢な VM を利用して現在の Kubernetes ネットワーキングの制限を回避します。

アーキテクチャ

コロケーション サービスのスタックを実行する 3 つの VM アーキテクチャ。

コンセプトとテクノロジー

このセクションでは、マルチゾーン アーキテクチャ内の機能コンポーネントとその特定の役割について詳しく説明します。

インフラストラクチャとプラットフォーム

  • 仮想マシン(VM): 3 つの専用コンピューティング インスタンス。それぞれが個別の可用性ゾーンにデプロイされ、障害発生ドメインの境界を形成します。
  • GDC グローバル L4 ロードバランサ: 安定した内部 VIP を公開するプラットフォーム管理のネットワーキング構成。Python 駆動の HTTP ヘルスチェックを自動的に評価して、インバウンド トラフィックをリダイレクトします。

サービスとロジック

  • MariaDB 12: コア リレーショナル データベース エンジン。
  • Galera プラグイン: 同期マルチマスター レプリケーションとノード クォーラムの検証を行うクラスタリング フレームワーク。
  • HAProxy: 各 VM でトラフィック ルーターとして機能します。デッドロックを防ぐために書き込み用のアクティブ / バックアップ トポロジで構成され、分散読み取り用にラウンドロビンで構成されています。
  • Python ヘルスチェック サービス: ローカル データベースの状態を継続的にポーリングし、ポート 9200 を介して HAProxy と L4 ロードバランサにヘルス ステータスを通知する軽量の HTTP サービス(systemd でラップ)。

データフローとインターフェース

  1. アプリケーションは、グローバル L4 ロードバランサ VIP にデータベース リクエストを送信します。
  2. ロードバランサは、いずれかの VM 上の正常な HAProxy インスタンスへの接続をプロキシします。
  3. リクエストされたポートに基づいて、HAProxy はトラフィックを動的に転送します。ポート 3306 は書き込み用のアクティブ ノードを厳密にターゲットとし、ポート 3307 はクラスタ全体で読み取りを循環させます。

設計上の考慮事項

一般的な考慮事項

  • パフォーマンスと整合性のトレードオフ: Galera はネイティブに同期するため、すべてのトランザクションがクラスタピアによって確認される必要があります。パフォーマンスは、GDC 環境内のゾーン間ネットワーク レイテンシに直接相関します。
  • リソース管理: HAProxy をデータベース VM に直接デプロイすると、ハードウェアの使用率が最適化されますが、接続プーリングのオーバーヘッドによってコア MariaDB プロセスが枯渇しないように、リソースを慎重にチューニングする必要があります。

ヘルスチェックに関する考慮事項

このソリューションでは、シンプルで外部依存関係がないカスタム Python スクリプトを使用していますが、xinetd と clustercheck を使用して標準の OSS ヘルスチェックを実装することもできます。

  • カスタム Python スクリプト: プリインストールされた Python 3 と http.server モジュールを活用します。追加のパッケージ転送が不要なため、エアギャップ環境に最適です。ただし、お客様はカスタム スクリプト コードを維持する必要があります。
  • OSS ツール(xinetd / clustercheck): メンテナンスの負担をオープンソース コミュニティにシフトしますが、初期のエアギャップ ソフトウェアの準備中にアーキテクチャの複雑さと依存関係の管理が増加します。

パフォーマンスに関する注意事項

デプロイを計画する際は、パフォーマンスと信頼性を最適化するために、次の具体的な要素を考慮してください。

  • ハードウェアのサイズ設定: 要件はワークロードによって異なりますが、各 VM の開始点として次の標準プロファイルを使用します。
    • 開発 / 概念実証: 2 vCPU、8 GB RAM(安定した運用のための最小要件)。
    • 小規模なプロダクション: 4 vCPU、16 GB RAM。同時実行数が中程度の内部ツールに適しています。
    • 標準プロダクション: 8 vCPU、32 GB RAM。ミッション クリティカルなアプリケーションに推奨されるベースライン。
    • 高スループット: 16 個以上の vCPU、64 GB 以上の RAM。InnoDB バッファプールでの広範なデータ キャッシュのメリットを享受する、大規模なワーキング セットを使用するワークロードに必要です。
  • ストレージのパフォーマンス: 高パフォーマンスのストレージは、データベースの耐久性とクラスタの安定性に不可欠です。同期レプリケーションの「commit」フェーズ中の書き込みレイテンシを最小限に抑えるには、SSD ディスクを強くおすすめします。最適なパフォーマンスを得るには、Galera gcache または MySQL バイナリログがボトルネックにならないように、p99 ディスク書き込みレイテンシを 10 ミリ秒未満にすることを目指します。
  • ネットワーク レイテンシとフロー制御: VM 間のレイテンシは、トランザクションの commit 速度に直接影響します。
    • 同期レプリケーション: Galera クラスタまたはグループ レプリケーション クラスタでは、すべての書き込みトランザクションが過半数のノードによって確認される必要があります。GDC エアギャップのゾーン間レイテンシは通常 1 ミリ秒未満です。これは、書き込みオーバーヘッドを最小限(通常 10 ~ 30%)に抑えるのに最適です。
    • フロー制御: ネットワーク ジッターが高い場合や、1 つの「低速」ノードがある場合、Galera フロー制御がトリガーされ、クラスタ全体で書き込みが一時停止して、遅延しているノードが追いつくことができます。
  • HAProxy(または MySQL Router)の役割: ロードバランサは依然として不可欠です。
    • トラフィック分割: HAProxy は、書き込みトラフィックを単一のアクティブ ノード(ポート 3306)に厳密に転送してデッドロックを防ぎ、読み取り専用クエリをすべての同期レプリカ(ポート 3307)に分散します。
    • 接続の安定性: 抽象化レイヤを提供することで、アプリケーションが複雑なフェイルオーバー ロジックを手動で処理する必要がなくなります。
  • サイドカー コンポーネント: カスタム Python ヘルスチェック サービスとロードバランサは軽量ですが、重要です。VM の CPU の可用性が一貫していることを確認します。高負荷のシナリオでは、ハイパーバイザ レベルでの CPU の「スティーリング」によりヘルスチェックのレスポンスが遅延し、グローバル ロードバランサがローテーションから正常なノードを早期に排除する可能性があります。

設計上の意思決定

この SRA で行われたアーキテクチャの選択は、GDC エアギャップの制限に明示的に対処し、高スループットに最適化されています。

  • Kubernetes 上の仮想マシン: GDC エアギャップは現在、複数の物理ゾーンにまたがる Kubernetes クラスタをサポートしていません。VM ベースのアプローチが厳密に選択されたのは、専用の VM を別々のゾーンにデプロイすることが、真のマルチゾーン高可用性を実現し、ゾーン全体の障害を回避する唯一の実行可能な方法であるためです。
  • Galera とプライマリ / セカンダリの手動設定(ProxySQL を使用)の比較: ProxySQL と組み合わせた従来のプライマリ / セカンダリ アーキテクチャが、実現可能な代替手段として評価されました。ただし、ProxySQL とともに手動フェイルオーバー ロジックを処理すると、スクリプト作成と運用が非常に複雑になります。代わりに Galera が選択されたのは、そのネイティブな同期性により、フェイルオーバーの複雑さが大幅に軽減され、パフォーマンスが大幅に向上するためです。
  • Orchestrator の拒否: Orchestrator は、自動フェイルオーバーの業界標準のトポロジ マネージャーとして高く評価されています。しかし、評価の結果、MariaDB 10 のみをサポートし、11 より新しい MariaDB バージョンとの互換性がないため、最終的に却下されました。これにより、ターゲットの MariaDB 12 の要件との互換性がなくなりました。
  • プラットフォーム ネイティブのグローバル ロード バランシング: ネイティブの GDC グローバル L4 ロードバランサを活用することで、VIP が GDC コントロール プレーンによって制御され、エントリ ポイントの復元力が維持され、ゾーン間のトラフィック配信が簡素化されます。

前提条件と制限事項

前提条件

  • インフラストラクチャの可用性: 3 つのアベイラビリティ ゾーンに均等に分散された、専用の適切なサイズの VM とグローバル ロードバランサをプロビジョニングするのに十分なプロジェクト割り当てがある。
  • セキュア ネットワーキング: 鍵ベースのアクセスと適切な ProjectNetworkPolicies(PNP)が確立され、クラスタ内の Galera 同期とヘルスチェック ポーリングが許可されます。

制限事項

  • Kubernetes がサポートされていない: コンテナ化された Kubernetes ベースのソリューションを厳密に求めているお客様は、プラットフォームでストレッチ クラスタが完全にサポートされるまで、マルチゾーン HA を実現できません。
  • 手動アップグレードが必要: マネージド サービスとは異なり、このソリューションでは、OS レベルの定期的なパッチ適用、データベースのマイナー バージョンのアップグレード、Galera のバージョン管理の責任がすべてお客様にあります。
  • ネットワーク レイテンシの感度: 同期レプリケーションには、高品質で安定したネットワークが必要です。エアギャップ ゾーン間のネットワーク ジッターやレイテンシの急増により、MariaDB クラスタ全体の書き込みオペレーションが比例して遅延します。

その他の教材