このドキュメントでは、 Google Cloud Managed Service for Apache Kafka に適用される割り当てとシステムの上限について説明します。
- 割り当てにはデフォルト値がありますが、通常は 調整をリクエストできます。
- システムの上限は固定値で、変更できません。
Google Cloud では、割り当てを使用して公平性を確保し、リソースの使用量と可用性の急増を抑えます。割り当ては、 Google Cloud プロジェクトで使用できるGoogle Cloud リソースの量を制限します。割り当ては、ハードウェア、ソフトウェア、ネットワーク コンポーネントなど、さまざまなリソースタイプに適用されます。たとえば、割り当てによって、サービスへの API 呼び出しの数、プロジェクトで同時に使用されるロードバランサの数、作成可能なプロジェクトの数を制限できます。割り当てを適用することで、サービスの過負荷を防ぎ、Google Cloud ユーザーのコミュニティを保護します。割り当ては、自組織で使用している Google Cloud リソースの管理にも役立ちます。
Cloud Quotas システムは次のことを行います。
- Google Cloud のプロダクトとサービスの消費量をモニタリングする
- これらのリソースの消費量を制限する
- 割り当て値の変更をリクエストし、割り当ての調整を自動化する手段を提供する
ほとんどの場合、割り当ての許容量を超えるリソースを消費しようとすると、システムによってリソースへのアクセスがブロックされ、実行しようとしているタスクは失敗します。
割り当ては通常、 Google Cloud プロジェクト レベルで適用されます。あるプロジェクトでリソースを使用しても、別のプロジェクトで使用可能な割り当てに影響することはありません。 Google Cloud プロジェクト内では、すべてのアプリケーションと IP アドレスで割り当てが共有されます。
詳細については、 Cloud Quotas の概要をご覧ください。
Managed Service for Apache Kafka リソースには、システムの上限もあります。 システムの上限は変更できません。
割り当ての表示と管理
特定のプロジェクトについて、現在の割り当ての上限と使用状況を確認するには、[割り当てとシステム上限] ダッシュボードを使用します。このダッシュボードを使用して、次のこともできます。
- 割り当ての上限を引き下げる。
- 割り当ての上限引き上げを申請するプロセスを開始する。
Managed Service for Apache Kafka の割り当て
次の表に記載されている割り当ては、 プロジェクトごとに[**割り当てとシステム上限**] ダッシュボードで表示、編集できます。
| Quota | デフォルトの割り当て上限 | 説明 |
|---|---|---|
| 1 プロジェクト、1 リージョンあたりのクラスタ数 | 5 | 特定のリージョンで 1 つのプロジェクトに許可されるクラスタの最大数。 |
| 1 プロジェクト、1 リージョンあたりの CPU 容量 | 750 | 特定のリージョンのプロジェクト内のブローカーに許可される最大 CPU 容量。 |
| 1 プロジェクト、1 リージョンあたりのメモリ容量 | 6,000 GiB | 特定のリージョンのプロジェクト内のブローカーに許可される最大メモリ容量。 |
| 1 プロジェクト、1 リージョンあたりのブローカーのローカル ディスク容量 | 200 TiB | 特定のリージョンの プロジェクト内のブローカーのローカル ディスクに許可される最大メモリ容量。 |
| 1 プロジェクト、1 リージョンあたりのクラスタ書き込みリクエスト数(1 分あたり) | 100 | 特定のリージョンのプロジェクトで 1 分間に許可されるクラスタの書き込みリクエスト数( UpdateCluster、DeleteCluster など)。これは、プロデューサーがレコードを公開できるレートの割り当てではありません。 |
| 1 プロジェクト、1 リージョンあたりのクラスタ作成リクエスト数(1 分あたり) | 1 | 特定のリージョンのプロジェクトで 1 分間に許可される CreateCluster リクエストの数 。 |
| 1 プロジェクト、1 リージョンあたりのクラスタ読み取りリクエスト数(1 分あたり)。これは、コンシューマーがレコードを読み取ることができるレートの割り当てではありません。 | 600 | 特定のリージョンのプロジェクトで 1 分間に許可されるクラスタの読み取りリクエスト数( GetCluster、ListClusters など)。 |
| 1 プロジェクト、1 リージョンあたりのクラスタ認証接続リクエスト数(1 分あたり)。 | 1,200 | 特定のリージョンのプロジェクトで 1 分間に認証できるクライアント接続の数 。 |
| 1 プロジェクト、1 リージョンあたりのトピック書き込みリクエスト数(1 分あたり)。 | 100 | 特定のリージョンのプロジェクトで 1 分間に許可されるトピックの書き込みリクエスト数(CreateTopic UpdateTopic、DeleteTopic など)。 |
| 1 プロジェクト、1 リージョンあたりのトピック読み取りリクエスト数(1 分あたり)。 | 600 | 特定のリージョンのプロジェクトで 1 分間に許可されるトピックの読み取りリクエスト数(GetTopic、ListTopics など) 。 |
| 1 プロジェクト、1 リージョンあたりのコンシューマー グループ書き込みリクエスト数(1 分あたり)。 | 100 | 特定のリージョンのプロジェクトで 1 分間に許可されるトピックの書き込みリクエスト数( UpdateConsumerGroup、DeleteConsumerGroup など)。 |
| 1 プロジェクト、1 リージョンあたりのコンシューマー グループ読み取りリクエスト数(1 分あたり)。 | 600 | 特定のリージョンのプロジェクトで 1 分間に許可されるトピックの読み取りリクエスト数(GetConsumerGroup、 ListConsumerGroups など)。 |
| 1 プロジェクト、1 リージョンあたりのオペレーション リクエスト数(1 分あたり) | 1,200 | 特定のリージョンのプロジェクトで 1 分間に許可される長時間実行オペレーションのリクエスト数。 |
注: デフォルトの割り当て上限は、プロジェクトの履歴によってプロジェクトごとに異なる場合があります。ここに記載されている値は一般的なものです。
割り当ての増加をリクエストする
通常、割り当てを調整するには Google Cloud コンソールを使用します。詳細については、 割り当ての調整をリクエストするをご覧ください。
Managed Service for Apache Kafka の上限
Managed Service for Apache Kafka には次の上限があります。
- ディスク容量: vCPU あたり 100 GiB 以上、ブローカーあたり 32, 768 GiB(32 TiB)以下。
- デフォルトの最大メッセージ サイズ(
message.max.bytes)は 10 MiB - トピックあたりのデフォルトのパーティション数は 1。