이 문서에서는 Apache Kafka용 Google Cloud 관리형 서비스에 적용되는 할당량과 시스템 한도를 설명합니다.
- 할당량에는 기본값이 있지만 일반적으로 조정을 요청할 수 있습니다.
- 시스템 한도는 변경할 수 없는 고정 값입니다.
Google Cloud 는 공정성을 보장하고 리소스 사용 및 가용성의 급증을 줄이기 위해 할당량을 사용합니다. 할당량은 Google Cloud 프로젝트에서 사용할 수 있는Google Cloud 리소스 양을 제한합니다. 할당량은 하드웨어, 소프트웨어, 네트워크 구성요소를 포함하여 다양한 리소스 유형에 적용됩니다. 예를 들어 할당량에 따라 서비스에 대한 API 호출 수, 프로젝트에서 동시에 사용하는 부하 분산기 수, 만들 수 있는 프로젝트 수가 제한될 수 있습니다. 할당량은 서비스 과부하를 방지하여Google Cloud 사용자 커뮤니티를 보호합니다. 또한 할당량은 자체 Google Cloud 리소스를 관리하는 데 도움이 됩니다.
Cloud Quotas 시스템은 다음을 수행합니다.
- Google Cloud 제품 및 서비스 소비량 모니터링
- 리소스 소비 제한
- 할당량값 변경을 요청하고 할당량 조정을 자동화하는 방법 제공
대부분의 경우 할당량이 허용하는 것보다 더 많은 리소스를 소비하려고 하면 시스템에서 리소스에 대한 액세스를 차단하고 수행하려는 작업이 실패합니다.
할당량은 일반적으로 Google Cloud 프로젝트 수준에서 적용됩니다. 한 프로젝트의 리소스를 사용해도 다른 프로젝트에서 사용 가능한 할당량에는 영향을 미치지 않습니다. Google Cloud 프로젝트 내에서 할당량은 모든 애플리케이션과 IP 주소에 공유됩니다.
자세한 내용은 Cloud Quotas 개요를 참고하세요.
Apache Kafka용 관리형 서비스 리소스에도 시스템 한도가 있습니다. 한도는 변경할 수 없습니다.
할당량 보기 및 관리
특정 프로젝트의 경우 할당량 및 시스템 한도 대시보드를 사용하여 현재 할당량 한도 및 사용량을 볼 수 있습니다. 이 대시보드를 사용하여 다음 작업을 수행할 수도 있습니다.
- 할당량 한도 줄이기
- 할당량 한도 상향을 신청하는 프로세스 시작
Managed Service for Apache Kafka 할당량
할당량 및 시스템 한도 대시보드에서 각 프로젝트에 대해 다음 표에 나열된 할당량을 보고 수정할 수 있습니다.
| 할당량 | 기본 할당량 한도 | 설명 |
|---|---|---|
| 리전별 프로젝트당 클러스터 | 5 | 특정 리전에서 프로젝트당 허용되는 최대 클러스터 수입니다. |
| 리전별 프로젝트당 CPU 용량 | 750 | 특정 리전의 프로젝트 내 브로커에 허용되는 최대 CPU 용량입니다. |
| 리전별 프로젝트당 메모리 용량 | 6,000GiB | 특정 리전의 프로젝트 내 브로커에 허용되는 최대 메모리 용량입니다. |
| 프로젝트별 리전별 분당 클러스터 쓰기 요청 수 | 100 | 특정 리전에서 프로젝트별로 분당 허용되는 클러스터 쓰기 요청 수입니다(예: UpdateCluster, DeleteCluster). 이는 프로듀서가 레코드를 게시할 수 있는 비율에 대한 할당량이 아닙니다. |
| 리전별 프로젝트별 분당 클러스터 생성 요청 수 | 1 | 특정 리전의 프로젝트별로 분당 허용되는 CreateCluster 요청 수입니다. |
| 프로젝트별 리전별 분당 클러스터 읽기 요청 수입니다. 이는 소비자가 레코드를 읽을 수 있는 비율에 대한 할당량이 아닙니다. | 600 | 특정 리전에서 프로젝트별로 분당 허용되는 클러스터 읽기 요청 수입니다(예: GetCluster, ListClusters). |
| 리전별 프로젝트별 분당 클러스터 인증 연결 요청 수입니다. | 1200 | 특정 리전의 프로젝트당 분당 인증할 수 있는 클라이언트 연결 수입니다. |
| 주제 쓰기 요청 수(분당, 프로젝트별, 리전별) | 100 | 특정 리전에서 프로젝트별로 분당 허용되는 주제 쓰기 요청 수입니다(예: CreateTopic, UpdateTopic, DeleteTopic). |
| 주제 읽기 요청 수(분당, 프로젝트별, 리전별) | 600 | 특정 리전에서 프로젝트별로 분당 허용되는 주제 읽기 요청 수입니다(예: GetTopic, ListTopics). |
| 프로젝트별, 리전별 분당 소비자 그룹 쓰기 요청 수입니다. | 100 | 특정 리전에서 프로젝트별 분당 허용되는 UpdateConsumerGroup 및 DeleteConsumerGroup과 같은 주제의 쓰기 요청 수입니다. |
| 프로젝트별 리전별 분당 소비자 그룹 읽기 요청 수입니다. | 600 | 특정 리전에서 프로젝트별로 분당 허용되는 주제 읽기 요청 수입니다(예: GetConsumerGroup, ListConsumerGroups). |
| 리전별 프로젝트별 분당 작업 요청 수 | 1200 | 특정 리전에서 프로젝트당 분당 허용되는 장기 실행 작업 요청 수입니다. |
참고: 기본 할당량 한도는 프로젝트의 기록에 따라 프로젝트마다 다를 수 있습니다. 여기에 인용된 값은 일반적인 값입니다.
할당량 상향 조정 요청
대부분의 할당량을 조정하려면 Google Cloud 콘솔을 사용합니다. 자세한 내용은 할당량 조정 요청을 참조하세요.
Managed Service for Apache Kafka 한도
Managed Service for Apache Kafka에는 다음과 같은 제한이 있습니다.
- vCPU당 100GB 이상의 로컬 SSD vCPU당 100GB의 로컬 SSD에 대한 요금이 청구되지만 클러스터에서 언제든지 더 많은 SSD를 사용할 수 있습니다.
- 기본 최대 메시지 크기 (
message.max.bytes)는 10MiB입니다. - 주제당 기본 파티션 수 1