Google Cloud Managed Lustre bietet verschiedene Leistungsstufen, um Ihren spezifischen Anforderungen an Arbeitslasten und Ihr Budget zu erfüllen. Sie können eine Stufe auswählen, die eine dauerhafte, vorhersehbare Leistung für Ihr gesamtes Dateisystem bietet, oder eine dynamische Stufe, die die Speicherkosten für große, teilweise aktive Datasets automatisch optimiert.
Verfügbare Stufen
In der folgenden Tabelle sind die für Managed Lustre verfügbaren Leistungsstufen zusammengefasst.
| Stufe | Mindestkapazität | Maximale Kapazität | Schrittgröße |
|---|---|---|---|
| 1.000 MB/s pro TiB | 9.000 GiB | 10.008.000 GiB (9,5 PiB) | Bei Speicherkapazitäten bis zu 2.556.000 GiB: 9.000 GiB Bei größeren Speicherkapazitäten: 72.000 GiB |
| 500 MB/s pro TiB | 18.000 GiB | 20.016.000 GiB (19,1 PiB) | Bei Speicherkapazitäten bis zu 5.112.000 GiB: 18.000 GiB Bei größeren Speicherkapazitäten: 144.000 GiB |
| 250 MB/s pro TiB | 36.000 GiB | 40.032.000 GiB (38,2 PiB) | Bei Speicherkapazitäten bis zu 10.224.000 GiB: 36.000 GiB Bei größeren Speicherkapazitäten: 288.000 GiB |
| 125 MB/s pro TiB | 72.000 GiB | 20.448.000 GiB (19,5 PiB) | 72.000 GiB |
| Dynamisch (25 MB/s pro TiB) | 472.000 GiB | 84.016.000 GiB (80,1 PiB) | 472.000 GiB |
Die Schrittgrößen ändern sich, sobald die Instanzgröße einen bestimmten Schwellenwert erreicht.
Sie können die Speicherkapazität einer Instanz nach der Erstellung erhöhen, bis zum maximal zulässigen Wert für die Leistungsstufe und Schrittgröße. Wenn Sie eine Instanz innerhalb des kleineren Schrittgrößenbereichs für die Stufe erstellen, können Sie sie später nicht über den Schrittgrößenschwellenwert hinaus erhöhen. Weitere Informationen finden Sie unter Einschränkungen bei der Erhöhung der Kapazität.
Nummerierte Stufen
Nummerierte Stufen bieten eine konsistente Hochgeschwindigkeitsleistung. Diese Stufen sind ideal für Arbeitslasten, die bei jedem Datenzugriff einen hohen Durchsatz und eine niedrige Latenz erfordern.
Sie wählen beim Erstellen der Instanz ein bestimmtes Leistungsniveau aus und dieser Durchsatz wird für Ihr gesamtes Dateisystem konsistent bereitgestellt. Die Leistung skaliert linear mit der Menge des bereitgestellten Speichers. Neben dem Rohdurchsatz werden auch die IOPS- und Metadatenleistung mit der bereitgestellten Kapazität und dem bereitgestellten Durchsatz der Instanz skaliert.
- 1.000 MB/s pro TiB: Empfohlen für Arbeitslasten mit hoher Leistung und KI/ML-Training,bei denen der Durchsatz entscheidend ist.
- 500 MB/s pro TiB: Für anspruchsvolle KI/ML-Arbeitslasten, komplexe HPC-Anwendungen und datenintensive Analysen, die einen hohen Durchsatz erfordern, aber von einem ausgewogeneren Preis-Leistungs-Verhältnis profitieren können.
- 250 MB/s pro TiB: Geeignet für eine breite Palette von HPC-Arbeitslasten, KI/ML-Inferenz, Datenvorverarbeitung und Anwendungen, die eine bessere Leistung als herkömmliches NFS zu einem kostengünstigen Preis benötigen.
- 125 MB/s pro TiB: Für Szenarien, in denen große Kapazitäten und paralleler Dateisystemzugriff wichtig sind. Gut für weniger E/A-intensive parallele Aufgaben.
Dynamische Stufe
Die dynamische Ebene ist eine kostengünstige Lösung, die für die Verarbeitung wachsender KI- und HPC-Datasets entwickelt wurde. Die Leistung wird automatisch auf Grundlage der Datenzugriffsmuster optimiert. Es bietet einen einzelnen, einheitlichen Namespace im Petabyte-Bereich und ermöglicht einen schnellen Zugriff auf aktive Daten, die in einem leistungsstarken Cache gespeichert sind. Gleichzeitig werden die Gesamtbetriebskosten für große Datasets gesenkt. Der aggregierte Durchsatz, der für die Instanz verfügbar ist, wird mit 25 MB/s pro TiB skaliert.
Das System verwaltet die Datenplatzierung intelligent mithilfe einer automatisierten Richtlinie, die dafür sorgt, dass häufig verwendete Daten leistungsstark bleiben. Dieser Prozess ist für Nutzer und Anwendungen transparent, die mit dem Dateisystem als einem einzigen Bereitstellungspunkt interagieren. Es sind keine manuelle Datenmigration oder kein Verwaltungsaufwand erforderlich.
Hauptvorteile
- Geringere Speicherkosten: Sie können den Preis pro Byte für große Datasets senken, indem Sie den Großteil Ihrer Daten auf kostengünstigem Volumenspeicher speichern.
- Einzelner Namespace im Petabyte-Bereich: Konsolidieren Sie riesige, wachsende Datasets an einem einzigen Bereitstellungspunkt, ohne Daten manuell zwischen verschiedenen Speichersystemen migrieren oder abstufen zu müssen.
- Intelligent und automatisiert: Ein transparentes Caching-System auf Blockebene sorgt dafür, dass Hochleistungsspeicher für die wichtigsten Daten verwendet wird.
- Kombinierte Leistung: Sie erhalten eine Latenz von weniger als einer Millisekunde für aktive Daten und eine konsistente Latenz von einigen zehn Millisekunden für weniger häufig abgerufene Teile des Datasets.
Detaillierte Leistungsdaten
Wenn Sie die Best Practices unter Leistungsüberlegungen befolgen, können Sie mit Ihren Instanzen diese IOPS- und Metadatenleistungszahlen erreichen.
IOPS
Die maximalen IOPS skalieren linear pro TiB der bereitgestellten Instanzkapazität.
| Durchsatzstufe | Lese-IOPS (pro TiB) | Schreib-IOPS (pro TiB) |
|---|---|---|
125 MBps per TiB |
725 | 700 |
250 MBps per TiB |
1.450 | 1.400 |
500 MBps per TiB |
2.900 | 2.800 |
1000 MBps per TiB |
5.800 | 5.600 |
Dynamic |
145 | 140 |
Metadatenvorgänge
Die maximale Anzahl von Metadatenvorgängen steigt schrittweise mit der Kapazität.
Jede Instanz erhält ihren ersten Schritt der Metadatenleistung bei der Mindestinstanzgröße, die kleiner als der Standardschritt für die Kapazität ist.
Bei größeren Instanzen steigt die Leistung jedes Mal, wenn die Gesamtkapazität ein Vielfaches der Schrittgröße überschreitet.
| Leistungsstufe | Kapazitätsinkrement (GiB) | Dateistatistiken pro Schritt hinzugefügt | Pro Schritt hinzugefügte Dateierstellungen | Pro Schritt hinzugefügte Löschvorgänge für Dateien |
|---|---|---|---|---|
| 1.000 MB/s pro TiB | 72.000 | 410.000 pro Sekunde | 115.000 pro Sekunde | 95.000 pro Sekunde |
| 500 MB/s pro TiB | 144.000 | |||
| 250 MB/s pro TiB | 288.000 | |||
| 125 MB/s pro TiB | 576.000 | |||
| Dynamisch | 3.776.000 | 275.000 pro Sekunde | 115.000 pro Sekunde | 130.000 pro Sekunde |
Beispiel: Für die Stufe mit 1.000 MB/s pro TiB beträgt die Kapazitätsinkrementgröße 72.000 GiB. Wenn Sie eine Instanz mit 153.000 GiB erstellen, erhalten Sie Metadatenleistung für drei Stufen:
- Schritt 1: Gewährt bei der Mindestinstanzgröße.
- Schritt 2: Wird gewährt,wenn die Kapazität 72.000 GiB überschreitet.
- Schritt 3: Wird gewährt,wenn die Kapazität 144.000 GiB überschreitet.
- Schritt 4: Nicht erreicht. Wird gewährt,wenn die Kapazität 216.000 GiB überschreitet.
Da 153.000 GiB zwischen den Grenzwerten von 144.000 GiB und 216.000 GiB liegt, erhält die Instanz drei Leistungsstufen: maximal 1.230.000 Dateistatistiken pro Sekunde (3 × 410.000).