Google Cloud Managed Lustre는 특정 워크로드 요구사항과 예산을 충족하기 위해 다양한 성능 등급을 제공합니다. 전체 파일 시스템에 지속적이고 예측 가능한 성능을 제공하는 등급 또는 대규모의 부분적으로 활성 상태인 데이터 세트의 스토리지 비용을 자동으로 최적화하는 동적 등급을 선택할 수 있습니다.
사용 가능한 등급
다음 표에는 Managed Lustre에 사용할 수 있는 성능 등급이 요약되어 있습니다.
| 등급 | 최소 용량 | 최대 용량 | 단계 크기 |
|---|---|---|---|
| TiB당 1,000MBps | 9,000 GiB | 10,008,000 GiB (9.5 PiB) | 최대 1,530,000GiB의 스토리지 용량: 9,000GiB 더 큰 스토리지 용량: 72,000GiB |
| TiB당 500MBps | 18,000 GiB | 20,016,000 GiB (19.1 PiB) | 최대 3,060,000GiB의 스토리지 용량: 18,000GiB 더 큰 스토리지 용량: 144,000GiB |
| TiB당 250MBps | 36,000 GiB | 40,032,000 GiB (38.2 PiB) | 최대 6,120,000GiB의 스토리지 용량: 36,000GiB 더 큰 스토리지 용량: 288,000GiB |
| TiB당 125MBps | 72,000 GiB | 12,240,000 GiB (11.7 PiB) | 72,000 GiB |
| 동적 (TiB당 25MBps) | 472,000 GiB | 84,016,000 GiB (80.1 PiB) | 472,000 GiB |
인스턴스 크기가 특정 기준점에 도달하면 단계 크기가 변경됩니다.
인스턴스를 만든 후에는 성능 등급 및 단계 크기에 허용되는 최대값까지 인스턴스의 스토리지 용량을 늘릴 수 있습니다. 등급의 더 작은 보폭 범위 내에서 인스턴스를 만드는 경우 나중에 보폭 기준점을 초과하여 늘릴 수 없습니다. 자세한 내용은 용량 증가 제한사항을 참조하세요.
번호가 매겨진 등급
번호가 매겨진 등급은 일관된 고속 성능을 제공합니다. 이러한 등급은 모든 데이터 액세스에 높은 처리량과 짧은 지연 시간이 필요한 워크로드에 적합합니다.
인스턴스를 만들 때 특정 성능 수준을 선택하면 전체 파일 시스템에 해당 처리량이 일관되게 제공됩니다. 성능은 프로비저닝하는 스토리지 양에 따라 선형적으로 확장됩니다. 원시 처리량 외에도 IOPS 및 메타데이터 성능도 인스턴스의 프로비저닝된 용량 및 처리량에 따라 확장됩니다.
- TiB당 1,000MBps: 처리량이 중요한 고성능 워크로드 및 AI/ML 학습에 권장됩니다.
- TiB당 500MBps: 상당한 처리량이 필요하지만 가격 대비 성능 비율의 균형을 중시하는 까다로운 AI/ML 워크로드, 복잡한 HPC 애플리케이션, 데이터 집약적인 분석에 적합합니다.
- TiB당 250MBps: 광범위한 HPC 워크로드, AI/ML 추론, 데이터 전처리, 기존 NFS보다 더 나은 성능이 필요한 애플리케이션에 적합하며 비용 효율적인 가격대로 제공됩니다.
- TiB당 125MBps: 대용량과 병렬 파일 시스템 액세스가 중요한 시나리오를 위해 설계되었습니다. I/O 바운드가 적은 병렬 작업에 적합합니다.
동적 등급
동적 등급은 데이터 액세스 패턴을 기반으로 성능을 자동으로 최적화하여 증가하는 AI 및 고성능 컴퓨팅 데이터 세트를 처리하도록 설계된 비용 효율적인 솔루션입니다. 페타바이트 규모의 단일 통합 네임스페이스를 제공하여 고성능 캐시에 저장된 활성 데이터에 대한 고속 액세스를 제공하는 동시에 대규모 데이터 세트의 총 소유 비용을 절감합니다. 인스턴스에 사용할 수 있는 집계 처리량은 TiB당 25MBps로 확장됩니다.
이 시스템은 자주 사용하는 데이터가 높은 성능을 유지하도록 지원하는 자동화된 정책을 사용하여 데이터 배치를 지능적으로 관리합니다. 이 프로세스는 수동 데이터 마이그레이션 또는 관리 오버헤드가 필요 없이 파일 시스템과 단일 마운트 지점으로 상호작용하는 사용자 및 애플리케이션에 투명합니다.
주요 이점
- 스토리지 비용 절감: 대부분의 데이터를 비용 효율적인 볼륨 스토리지에 저장하여 대규모 데이터 세트의 바이트당 가격을 낮춥니다.
- PB 규모의 단일 네임스페이스: 여러 스토리지 시스템 간에 데이터를 수동으로 마이그레이션하거나 계층화할 필요 없이 대규모의 증가하는 데이터 세트를 단일 마운트 지점으로 통합합니다.
- 지능형 자동화: 투명한 블록 수준 캐싱 시스템은 가장 중요한 데이터에 고성능 스토리지가 사용되도록 지원합니다.
- 혼합 성능: 활성 데이터에 대해 밀리초 미만의 지연 시간을 제공하고 데이터 세트의 액세스 빈도가 낮은 부분에 대해 일관된 수십 밀리초의 지연 시간을 제공합니다.
세부 성능 사양
인스턴스가 이러한 IOPS 및 메타데이터 성능 수치를 달성하도록 지원하려면 성능 고려사항의 권장사항을 따르세요.
IOPS
최대 IOPS는 프로비저닝된 인스턴스 용량의 TiB당 선형적으로 확장됩니다.
| 처리량 등급 | 읽기 IOPS (TiB당) | 쓰기 IOPS (TiB당) |
|---|---|---|
125 MBps per TiB |
725 | 700 |
250 MBps per TiB |
1,450 | 1,400 |
500 MBps per TiB |
2,900 | 2,800 |
1000 MBps per TiB |
5,800 | 5,600 |
Dynamic |
145 | 140 |
메타데이터 작업
최대 메타데이터 작업은 용량에 따라 단계적으로 증가합니다.
모든 인스턴스는 표준 용량 단계보다 작은 최소 인스턴스 크기에서 첫 번째 단계의 메타데이터 성능을 수신합니다.
더 큰 인스턴스의 경우 총 용량이 단계 크기의 배수를 초과할 때마다 성능이 증가합니다.
| 성능 등급 | 용량 단계 (GiB) | 단계당 파일 통계 추가 | 단계당 파일 생성 추가 | 단계당 파일 삭제 추가 |
|---|---|---|---|---|
| TiB당 1,000MBps | 72,000 | 초당 410,000개 | 초당 115,000개 | 초당 95,000개 |
| TiB당 500MBps | 144,000 | |||
| TiB당 250MBps | 288,000 | |||
| TiB당 125MBps | 576,000 | |||
| 동적 | 3,776,000 | 초당 275,000개 | 초당 115,000개 | 초당 130,000개 |
예: TiB당 1, 000MBps 등급의 경우 용량 단계 크기는 72,000GiB입니다. 153,000GiB 인스턴스를 만드는 경우 3단계의 메타데이터 성능을 수신합니다.
- 1단계: 최소 인스턴스 크기에서 부여됩니다.
- 2단계: 용량이 72,000GiB를 초과할 때 부여됩니다.
- 3단계: 용량이 144,000GiB를 초과할 때 부여됩니다.
- 4단계: 도달하지 않음. 용량이 216,000GiB를 초과할 때 부여됩니다.
153,000GiB는 144,000GiB와 216,000GiB 기준점 사이에 있으므로 인스턴스는 초당 최대 1,230,000개의 파일 통계 (3 * 410,000)로 3단계의 성능을 수신합니다.