このドキュメントでは、Google Cloud Managed Service for Apache Kafka に適用される割り当てとシステムの上限について説明します。
- 割り当てにはデフォルト値がありますが、通常は調整をリクエストできます。
- システムの上限は固定値で、変更できません。
Google Cloud では、割り当てを使用して公平性を確保し、リソースの使用量と可用性の急増を抑えます。割り当ては、 Google Cloud プロジェクトで使用できるGoogle Cloud リソースの量を制限します。割り当ては、ハードウェア、ソフトウェア、ネットワーク コンポーネントなど、さまざまなリソースタイプに適用されます。たとえば、割り当てによって、サービスへの API 呼び出しの数、プロジェクトで同時に使用されるロードバランサの数、作成可能なプロジェクトの数を制限できます。割り当てを適用することで、サービスの過負荷を防ぎ、Google Cloud ユーザーのコミュニティを保護します。割り当ては、自組織で使用している Google Cloud リソースの管理にも役立ちます。
Cloud Quotas システムは次のことを行います。
- Google Cloud のプロダクトとサービスの消費量をモニタリングする
- これらのリソースの消費量を制限する
- 割り当て値の変更をリクエストし、割り当ての調整を自動化する手段を提供する
ほとんどの場合、割り当ての許容量を超えるリソースを消費しようとすると、システムによってリソースへのアクセスがブロックされ、実行しようとしているタスクは失敗します。
割り当ては通常、 Google Cloud プロジェクト レベルで適用されます。あるプロジェクトでリソースを使用しても、別のプロジェクトで使用可能な割り当てに影響することはありません。 Google Cloud プロジェクト内では、すべてのアプリケーションと IP アドレスで割り当てが共有されます。
詳細については、Cloud Quotas の概要をご覧ください。
Managed Service for Apache Kafka のリソースにもシステムの上限があります。システムの上限は変更できません。
割り当ての表示と管理
特定のプロジェクトについて、現在の割り当ての上限と使用状況を確認するには、[割り当てとシステム上限] ダッシュボードを使用します。このダッシュボードを使用して、次のこともできます。
- 割り当ての上限を引き下げる。
- 割り当ての上限引き上げを申請するプロセスを開始する。
Managed Service for Apache Kafka の割り当て
次の表に記載する割り当ては、[割り当てとシステム上限] ダッシュボードでプロジェクトごとに表示、編集できます。
| 割り当て | デフォルトの割り当て上限 | 説明 |
|---|---|---|
| 1 リージョン、1 プロジェクトあたりのクラスタ数 | 5 | 特定のリージョンでプロジェクトごとに許可されるクラスタの最大数。 |
| 1 プロジェクト、1 リージョンあたりの CPU 容量 | 750 | 特定のリージョンのプロジェクト内のブローカーに許可される最大 CPU 容量。 |
| 1 リージョン、1 プロジェクトあたりのメモリ容量 | 6,000 GiB | 特定のリージョンのプロジェクト内のブローカーに許可される最大メモリ容量。 |
| 1 分、1 リージョン、1 プロジェクトあたりのクラスタ書き込みリクエスト数 | 100 | 特定のリージョンで、1 分あたり、1 プロジェクトあたりに許可されるクラスタの書き込みリクエスト数（UpdateCluster や DeleteCluster など）。これは、プロデューサーがレコードを公開できるレートの割り当てではありません。 |
| 1 分、1 プロジェクト、1 リージョンあたりのクラスタ作成リクエスト数 | 1 | 特定のリージョンで、1 分間に 1 プロジェクトあたり許可される CreateCluster リクエストの数。 |
| 1 リージョン、1 プロジェクト、1 分あたりのクラスタ読み取りリクエスト数。これは、コンシューマーがレコードを読み取ることができるレートの割り当てではありません。 | 600 | 特定のリージョンで、1 分あたり、1 プロジェクトあたりに許可されるクラスタの読み取りリクエスト数（GetCluster や ListClusters など）。 |
| 1 分、1 プロジェクト、1 リージョンあたりのクラスタ認証接続リクエスト数。 | 1200 | 指定されたリージョンのプロジェクトで 1 分間に認証できるクライアント接続の数。 |
| 1 分、1 リージョン、1 プロジェクトあたりのトピック書き込みリクエスト数。 | 100 | 特定のリージョンで、1 分、1 プロジェクトあたりに許可されるトピックの書き込みリクエスト数（CreateTopic、UpdateTopic、DeleteTopic など）。 |
| 1 分、1 プロジェクト、1 リージョンあたりのトピック読み取りリクエスト数。 | 600 | 特定のリージョンで 1 分、1 プロジェクトあたりに許可されるトピックの読み取りリクエスト数（GetTopic や ListTopics など）。 |
| 1 分、1 プロジェクト、1 リージョンあたりのコンシューマー グループの書き込みリクエスト数。 | 100 | 特定のリージョンで、1 分、1 プロジェクトあたりに許可されるトピックの書き込みリクエスト（UpdateConsumerGroup、DeleteConsumerGroup など）の数。 |
| 1 分、1 プロジェクト、1 リージョンあたりのコンシューマー グループの読み取りリクエスト数。 | 600 | 特定のリージョンで 1 分、1 プロジェクトあたりに許可されるトピックの読み取りリクエスト数（GetConsumerGroup や ListConsumerGroups など）。 |
| 1 リージョン、1 プロジェクト、1 分あたりのオペレーション リクエスト数 | 1200 | 特定のリージョンで 1 分間、1 プロジェクトあたりに許可される長時間実行オペレーションのリクエスト数。 |
注: デフォルトの割り当て上限は、プロジェクトの履歴に応じてプロジェクト間で異なる場合があります。ここで引用されている値は一般的な値です。
割り当ての増加をリクエストする
通常、割り当てを調整するには Google Cloud コンソールを使用します。詳細については、割り当ての調整をリクエストするをご覧ください。
Managed Service for Apache Kafka の上限
Managed Service for Apache Kafka には次の上限があります。
- vCPU あたり 100 GB 以上のローカル SSD。vCPU あたり 100 GB のローカル SSD の料金が請求されますが、クラスタで使用可能な SSD の容量は、常に 100 GB とは限りません。
- デフォルトの最大メッセージ サイズ（
message.max.bytes）は 10 MiB - トピックあたりのデフォルトのパーティション数（1）。