Google Cloud Managed Lustre bietet verschiedene Leistungsstufen, um Ihren spezifischen Arbeitslastanforderungen und Ihrem Budget gerecht zu werden. Sie können eine Stufe auswählen, die eine gleichbleibende, vorhersehbare Leistung für Ihr gesamtes Dateisystem bietet, oder eine dynamische Stufe, die die Speicherkosten für große, teilweise aktive Datensätze automatisch optimiert.
Verfügbare Stufen
In der folgenden Tabelle sind die für Managed Lustre verfügbaren Leistungsstufen zusammengefasst.
| Leistungsstufe | Minimale Kapazität | Maximale Kapazität | Schrittgröße |
|---|---|---|---|
| 1.000 MB/s pro TiB | 9.000 GiB | 10.008.000 GiB (9,5 PiB) | Für Speicherkapazitäten bis zu 2.556.000 GiB: 9.000 GiB Für größere Speicherkapazitäten: 72.000 GiB |
| 500 MB/s pro TiB | 18.000 GiB | 20.016.000 GiB (19,1 PiB) | Für Speicherkapazitäten bis zu 5.112.000 GiB: 18.000 GiB Für größere Speicherkapazitäten: 144.000 GiB |
| 250 MB/s pro TiB | 36.000 GiB | 40.032.000 GiB (38,2 PiB) | Für Speicherkapazitäten bis zu 10.224.000 GiB: 36.000 GiB Für größere Speicherkapazitäten: 288.000 GiB |
| 125 MB/s pro TiB | 72.000 GiB | 20.448.000 GiB (19,5 PiB) | 72.000 GiB |
| Dynamisch (25 MB/s pro TiB) | 472.000 GiB | 84.016.000 GiB (80,1 PiB) | 472.000 GiB |
Die Schrittgrößen ändern sich, sobald die Instanzgröße einen bestimmten Schwellenwert erreicht.
Sie können die Speicherkapazität einer Instanz nach dem Erstellen auf den für die Leistungsstufe und Schrittgröße zulässigen Höchstwert erhöhen. Wenn Sie eine Instanz mit einer kleineren Schrittgröße für die Stufe erstellen, können Sie sie später nicht über den Schwellenwert der Schrittgröße hinaus erhöhen. Weitere Informationen finden Sie unter Einschränkungen beim Erhöhen der Kapazität.
Nummerierte Stufen
Nummerierte Stufen bieten eine gleichbleibende, hohe Leistung. Diese Stufen sind ideal für Arbeitslasten, die bei jedem Datenzugriff einen hohen Durchsatz und eine geringe Latenz erfordern.
Sie wählen beim Erstellen der Instanz eine bestimmte Leistungsstufe aus und dieser Durchsatz wird für Ihr gesamtes Dateisystem einheitlich bereitgestellt. Die Leistung skaliert linear mit der bereitgestellten Speichermenge. Neben dem Rohdurchsatz skalieren auch die IOPS und die Metadatenleistung mit der bereitgestellten Kapazität und dem Durchsatz der Instanz.
Nummerierte Stufen bieten eine Latenz von weniger als einer Millisekunde.
- 1.000 MB/s pro TiB: Empfohlen für Arbeitslasten mit hoher Leistung und KI/ML Training,bei denen der Durchsatz entscheidend ist.
- 500 MB/s pro TiB: Für anspruchsvolle KI/ML-Arbeitslasten, komplexe HPC Anwendungen und datenintensive Analysen, die einen hohen Durchsatz erfordern, aber von einem ausgewogeneren Preis-Leistungs-Verhältnis profitieren können.
- 250 MB/s pro TiB: Geeignet für eine breite Palette von HPC-Arbeitslasten, KI/ML Inferenz, Datenvorverarbeitung und Anwendungen, die eine bessere Leistung als herkömmliches NFS zu einem kostengünstigen Preis benötigen.
- 125 MB/s pro TiB: Entwickelt für Szenarien, in denen große Kapazitäten und paralleler Dateisystemzugriff entscheidend sind. Gut für weniger I/O-gebundene parallele Aufgaben.
Dynamische Stufe
Die dynamische Stufe ist eine kostengünstige Lösung für wachsende KI- und HPC-Datensätze, die die Leistung automatisch anhand von Datenzugriffsmustern optimiert. Sie bietet einen einzelnen, einheitlichen Namespace im Petabyte-Bereich und ermöglicht einen schnellen Zugriff auf aktive Daten, die in einem Hochleistungscache gespeichert sind. Gleichzeitig werden die Gesamtbetriebskosten für große Datensätze gesenkt. Der für die Instanz verfügbare Gesamtdurchsatz skaliert mit 25 MB/s pro TiB.
Das System verwaltet die Datenplatzierung intelligent mithilfe einer automatisierten Richtlinie, die dafür sorgt, dass häufig verwendete Daten eine hohe Leistung beibehalten. Dieser Prozess ist für Nutzer und Anwendungen transparent. Sie interagieren mit dem Dateisystem als einzelner Bereitstellungspunkt, ohne dass eine manuelle Datenmigration oder ein Verwaltungsaufwand erforderlich ist.
Hauptvorteile
- Geringere Speicherkosten: Senken Sie den Preis pro Byte für große Datensätze, indem Sie den Großteil Ihrer Daten auf kostengünstigem Volume-Speicher speichern.
- Einzelner Namespace im PB-Bereich: Konsolidieren Sie große, wachsende Datensätze an einem einzigen Bereitstellungspunkt, ohne Daten manuell zwischen verschiedenen Speichersystemen migrieren oder stufen zu müssen.
- Intelligent und automatisiert: Ein transparentes Caching-System auf Blockebene sorgt dafür, dass Hochleistungsspeicher für die wichtigsten Daten verwendet wird.
- Kombinierte Leistung: Sie erhalten eine Latenz von weniger als einer Millisekunde für aktive Daten und eine gleichbleibende Latenz von einigen zehn Millisekunden für weniger häufig abgerufene Teile des Datensatzes.
Detaillierte Leistungsdaten
Beachten Sie die Best Practices unter Leistungsüberlegungen, damit Ihre Instanzen diese IOPS- und Metadatenleistungswerte erreichen.
IOPS
Die maximalen IOPS skalieren linear pro TiB der bereitgestellten Instanzkapazität.
| Leistungsstufe | Lese-IOPS (pro TiB) | Schreib-IOPS (pro TiB) |
|---|---|---|
| 1.000 MB/s pro TiB | 5.800 | 5.600 |
| 500 MB/s pro TiB | 2.900 | 2.800 |
| 250 MB/s pro TiB | 1.450 | 1.400 |
| 125 MB/s pro TiB | 725 | 700 |
| Dynamisch | 145 | 140 |
Metadatenvorgänge
Die maximale Anzahl von Metadatenvorgängen steigt in Schritten basierend auf der Kapazität.
Jede Instanz erhält den ersten Schritt der Metadatenleistung bei der minimalen Instanzgröße (die kleiner als der Standardschritt für die Kapazität ist).
Bei größeren Instanzen steigt die Leistung jedes Mal, wenn die Gesamtkapazität ein Vielfaches der Schrittgröße überschreitet.
| Leistungsstufe | Kapazitätsschritt (GiB) | Dateistatistiken pro Schritt hinzugefügt | Dateierstellungen pro Schritt hinzugefügt | Dateilöschungen pro Schritt hinzugefügt |
|---|---|---|---|---|
| 1.000 MB/s pro TiB | 72.000 | 410.000 pro Sekunde | 115.000 pro Sekunde | 95.000 pro Sekunde |
| 500 MB/s pro TiB | 144.000 | |||
| 250 MB/s pro TiB | 288.000 | |||
| 125 MB/s pro TiB | 576.000 | |||
| Dynamisch | 3.776.000 | 275.000 pro Sekunde | 115.000 pro Sekunde | 130.000 pro Sekunde |
Beispiel: Bei der Stufe „1.000 MB/s pro TiB“ beträgt die Schrittgröße für die Kapazität 72.000 GiB. Wenn Sie eine Instanz mit 153.000 GiB erstellen, erhalten Sie 3 Schritte der Metadatenleistung:
- Schritt 1: Bei der minimalen Instanzgröße gewährt.
- Schritt 2: Gewährt,wenn die Kapazität 72.000 GiB überschreitet.
- Schritt 3: Gewährt,wenn die Kapazität 144.000 GiB überschreitet.
- Schritt 4: Nicht erreicht. Gewährt,wenn die Kapazität 216.000 GiB überschreitet.
Da 153.000 GiB zwischen den Schwellenwerten von 144.000 GiB und 216.000 GiB liegt, erhält die Instanz drei Leistungsschritte: maximal 1.230.000 Dateistatistiken pro Sekunde (3 * 410.000).