Google Cloud Managed Lustre bietet verschiedene Leistungsstufen, um Ihren spezifischen Arbeitslastanforderungen und Ihrem Budget gerecht zu werden. Sie können eine Stufe auswählen, die eine gleichbleibende, vorhersehbare Leistung für Ihr gesamtes Dateisystem bietet, oder eine dynamische Stufe, die die Speicherkosten für große, teilweise aktive Datensätze automatisch optimiert.
Verfügbare Stufen
In der folgenden Tabelle sind die für Managed Lustre verfügbaren Leistungsstufen zusammengefasst.
| Stufe | Mindestkapazität | Maximale Kapazität | Schrittgröße |
|---|---|---|---|
| 1.000 MB/s pro TiB | 9.000 GiB | 10.008.000 GiB (9,5 PiB) | Bei Speicherkapazitäten bis zu 1.530.000 GiB: 9.000 GiB Bei größeren Speicherkapazitäten: 72.000 GiB |
| 500 MB/s pro TiB | 18.000 GiB | 20.016.000 GiB (19,1 PiB) | Bei Speicherkapazitäten bis zu 3.060.000 GiB: 18.000 GiB Bei größeren Speicherkapazitäten: 144.000 GiB |
| 250 MB/s pro TiB | 36.000 GiB | 40.032.000 GiB (38,2 PiB) | Bei Speicherkapazitäten bis zu 6.120.000 GiB: 36.000 GiB Bei größeren Speicherkapazitäten: 288.000 GiB |
| 125 MB/s pro TiB | 72.000 GiB | 12.240.000 GiB (11,7 PiB) | 72.000 GiB |
| Dynamisch (25 MB/s pro TiB) | 472.000 GiB | 84.016.000 GiB (80,1 PiB) | 472.000 GiB |
Die Schrittgrößen ändern sich, sobald die Instanzgröße einen bestimmten Schwellenwert erreicht.
Sie können die Speicherkapazität einer Instanz nach dem Erstellen auf den für die Leistungsstufe und Schrittgröße zulässigen Höchstwert erhöhen. Wenn Sie eine Instanz im kleineren Schrittgrößenbereich für ihre Stufe erstellen, können Sie sie später nicht über den Schwellenwert für die Schrittgröße hinaus erhöhen. Weitere Informationen finden Sie unter Einschränkungen beim Erhöhen der Kapazität.
Nummerierte Stufen
Nummerierte Stufen bieten eine gleichbleibende, hohe Leistung. Diese Stufen eignen sich ideal für Arbeitslasten, die bei jedem Datenzugriff einen hohen Durchsatz und eine niedrige Latenz erfordern.
Sie wählen beim Erstellen der Instanz eine bestimmte Leistungsstufe aus und dieser Durchsatz wird für Ihr gesamtes Dateisystem gleichbleibend bereitgestellt. Die Leistung skaliert linear mit der bereitgestellten Speichermenge. Neben dem Rohdurchsatz skalieren auch die IOPS und die Metadatenleistung mit der bereitgestellten Kapazität und dem Durchsatz der Instanz.
- 1.000 MB/s pro TiB: Empfohlen für Arbeitslasten mit hoher Leistung und KI/ML Training,bei denen der Durchsatz entscheidend ist.
- 500 MB/s pro TiB: Für anspruchsvolle KI/ML-Arbeitslasten, komplexe HPC Anwendungen und datenintensive Analysen, die einen hohen Durchsatz erfordern, aber von einem ausgewogeneren Preis-Leistungs-Verhältnis profitieren können.
- 250 MB/s pro TiB: Geeignet für eine breite Palette von HPC-Arbeitslasten, KI/ML-Inferenz, Datenvorverarbeitung und Anwendungen, die eine bessere Leistung als herkömmliches NFS zu einem kostengünstigen Preispunkt benötigen.
- 125 MB/s pro TiB: Entwickelt für Szenarien, in denen große Kapazitäten und paralleler Dateisystemzugriff entscheidend sind. Gut für weniger I/O-lastige parallele Aufgaben.
Dynamische Stufe
Die dynamische Stufe ist eine kostengünstige Lösung für wachsende KI- und HPC-Datensätze, die die Leistung automatisch anhand von Datenzugriffsmustern optimiert. Sie bietet einen einzelnen, einheitlichen Namespace im Petabyte-Bereich und ermöglicht einen schnellen Zugriff auf aktive Daten, die in einem Hochleistungscache gespeichert sind. Gleichzeitig werden die Gesamtbetriebskosten für große Datensätze gesenkt. Der für die Instanz verfügbare Gesamtdurchsatz skaliert mit 25 MB/s pro TiB.
Das System verwaltet die Datenplatzierung intelligent mithilfe einer automatisierten Richtlinie, die dafür sorgt, dass häufig verwendete Daten eine hohe Leistung beibehalten. Dieser Prozess ist für Nutzer und Anwendungen transparent. Sie interagieren mit dem Dateisystem als einzelner Bereitstellungspunkt, ohne dass eine manuelle Datenmigration oder ein Verwaltungsaufwand erforderlich ist.
Hauptvorteile
- Geringere Speicherkosten: Senken Sie den Preis pro Byte für große Datensätze, indem Sie den Großteil Ihrer Daten auf kostengünstigem Volume-Speicher speichern.
- Einzelner Namespace im Petabyte-Bereich: Konsolidieren Sie riesige, wachsende Datensätze in einem einzigen Bereitstellungspunkt, ohne Daten manuell zwischen verschiedenen Speichersystemen migrieren oder stufen zu müssen.
- Intelligent und automatisiert: Ein transparentes Caching-System auf Blockebene sorgt dafür, dass Hochleistungsspeicher für die wichtigsten Daten verwendet wird.
- Gemischte Leistung: Erhalten Sie eine Latenz im Submillisekundenbereich für aktive Daten und eine gleichbleibende Latenz im Bereich von zehn Millisekunden für weniger häufig abgerufene Teile des Datensatzes.
Detaillierte Leistungsdaten
Beachten Sie die Best Practices unter Leistungsüberlegungen, damit Ihre Instanzen diese IOPS- und Metadatenleistungswerte erreichen.
IOPS
Die maximalen IOPS skalieren linear pro TiB der bereitgestellten Instanzkapazität.
| Durchsatzstufe | Lese-IOPS (pro TiB) | Schreib-IOPS (pro TiB) |
|---|---|---|
125 MBps per TiB |
725 | 700 |
250 MBps per TiB |
1.450 | 1.400 |
500 MBps per TiB |
2.900 | 2.800 |
1000 MBps per TiB |
5.800 | 5.600 |
Dynamic |
145 | 140 |
Metadatenvorgänge
Die maximale Anzahl von Metadatenvorgängen steigt in Schritten basierend auf der Kapazität.
Jede Instanz erhält den ersten Schritt der Metadatenleistung bei der Mindestinstanzgröße (die kleiner als der Standardschritt für die Kapazität ist).
Bei größeren Instanzen steigt die Leistung jedes Mal, wenn die Gesamtkapazität ein Vielfaches der Schrittgröße übersteigt.
| Leistungsstufe | Kapazitätsschritt (GiB) | Dateistatistiken pro Schritt hinzugefügt | Dateierstellungen pro Schritt hinzugefügt | Dateilöschungen pro Schritt hinzugefügt |
|---|---|---|---|---|
| 1.000 MB/s pro TiB | 72.000 | 410.000 pro Sekunde | 115.000 pro Sekunde | 95.000 pro Sekunde |
| 500 MB/s pro TiB | 144.000 | |||
| 250 MB/s pro TiB | 288.000 | |||
| 125 MB/s pro TiB | 576.000 | |||
| Dynamisch | 3.776.000 | 275.000 pro Sekunde | 115.000 pro Sekunde | 130.000 pro Sekunde |
Beispiel: Bei der Stufe „1.000 MB/s pro TiB“ beträgt die Schrittgröße für die Kapazität 72.000 GiB. Wenn Sie eine Instanz mit 153.000 GiB erstellen, erhalten Sie 3 Schritte der Metadatenleistung:
- Schritt 1: Wird bei der Mindestinstanzgröße gewährt.
- Schritt 2: Wird gewährt,wenn die Kapazität 72.000 GiB übersteigt.
- Schritt 3: Wird gewährt,wenn die Kapazität 144.000 GiB übersteigt.
- Schritt 4: Nicht erreicht. Wird gewährt,wenn die Kapazität 216.000 GiB übersteigt.
Da 153.000 GiB zwischen den Schwellenwerten von 144.000 GiB und 216.000 GiB liegt, erhält die Instanz drei Leistungsschritte: maximal 1.230.000 Dateistatistiken pro Sekunde (3 * 410.000).