Leistungsstufen

Google Cloud Managed Lustre bietet verschiedene Leistungsstufen, um Ihren spezifischen Anforderungen an Arbeitslasten und Ihr Budget zu erfüllen. Sie können eine Stufe auswählen, die eine dauerhafte, vorhersehbare Leistung für Ihr gesamtes Dateisystem bietet, oder eine dynamische Stufe, die die Speicherkosten für große, teilweise aktive Datasets automatisch optimiert.

Verfügbare Stufen

In der folgenden Tabelle sind die für Managed Lustre verfügbaren Leistungsstufen zusammengefasst.

Stufe Mindestkapazität Maximale Kapazität Schrittgröße
1.000 MB/s pro TiB 9.000 GiB 10.008.000 GiB (9,5 PiB) Bei Speicherkapazitäten bis zu 2.556.000 GiB: 9.000 GiB
Bei größeren Speicherkapazitäten: 72.000 GiB
500 MB/s pro TiB 18.000 GiB 20.016.000 GiB (19,1 PiB) Bei Speicherkapazitäten bis zu 5.112.000 GiB: 18.000 GiB
Bei größeren Speicherkapazitäten: 144.000 GiB
250 MB/s pro TiB 36.000 GiB 40.032.000 GiB (38,2 PiB) Bei Speicherkapazitäten bis zu 10.224.000 GiB: 36.000 GiB
Bei größeren Speicherkapazitäten: 288.000 GiB
125 MB/s pro TiB 72.000 GiB 20.448.000 GiB (19,5 PiB) 72.000 GiB
Dynamisch (25 MB/s pro TiB) 472.000 GiB 84.016.000 GiB (80,1 PiB) 472.000 GiB

Die Schrittgrößen ändern sich, sobald die Instanzgröße einen bestimmten Schwellenwert erreicht.

Sie können die Speicherkapazität einer Instanz nach der Erstellung erhöhen, bis zum maximal zulässigen Wert für die Leistungsstufe und Schrittgröße. Wenn Sie eine Instanz innerhalb des kleineren Schrittgrößenbereichs für die Stufe erstellen, können Sie sie später nicht über den Schrittgrößenschwellenwert hinaus erhöhen. Weitere Informationen finden Sie unter Einschränkungen bei der Erhöhung der Kapazität.

Nummerierte Stufen

Nummerierte Stufen bieten eine konsistente Hochgeschwindigkeitsleistung. Diese Stufen sind ideal für Arbeitslasten, die bei jedem Datenzugriff einen hohen Durchsatz und eine niedrige Latenz erfordern.

Sie wählen beim Erstellen der Instanz ein bestimmtes Leistungsniveau aus und dieser Durchsatz wird für Ihr gesamtes Dateisystem konsistent bereitgestellt. Die Leistung skaliert linear mit der Menge des bereitgestellten Speichers. Neben dem Rohdurchsatz werden auch die IOPS- und Metadatenleistung mit der bereitgestellten Kapazität und dem bereitgestellten Durchsatz der Instanz skaliert.

  • 1.000 MB/s pro TiB: Empfohlen für Arbeitslasten mit hoher Leistung und KI/ML-Training,bei denen der Durchsatz entscheidend ist.
  • 500 MB/s pro TiB: Für anspruchsvolle KI/ML-Arbeitslasten, komplexe HPC-Anwendungen und datenintensive Analysen, die einen hohen Durchsatz erfordern, aber von einem ausgewogeneren Preis-Leistungs-Verhältnis profitieren können.
  • 250 MB/s pro TiB: Geeignet für eine breite Palette von HPC-Arbeitslasten, KI/ML-Inferenz, Datenvorverarbeitung und Anwendungen, die eine bessere Leistung als herkömmliches NFS zu einem kostengünstigen Preis benötigen.
  • 125 MB/s pro TiB: Für Szenarien, in denen große Kapazitäten und paralleler Dateisystemzugriff wichtig sind. Gut für weniger E/A-intensive parallele Aufgaben.

Dynamische Stufe

Die dynamische Ebene ist eine kostengünstige Lösung, die für die Verarbeitung wachsender KI- und HPC-Datasets entwickelt wurde. Die Leistung wird automatisch auf Grundlage der Datenzugriffsmuster optimiert. Es bietet einen einzelnen, einheitlichen Namespace im Petabyte-Bereich und ermöglicht einen schnellen Zugriff auf aktive Daten, die in einem leistungsstarken Cache gespeichert sind. Gleichzeitig werden die Gesamtbetriebskosten für große Datasets gesenkt. Der aggregierte Durchsatz, der für die Instanz verfügbar ist, wird mit 25 MB/s pro TiB skaliert.

Das System verwaltet die Datenplatzierung intelligent mithilfe einer automatisierten Richtlinie, die dafür sorgt, dass häufig verwendete Daten leistungsstark bleiben. Dieser Prozess ist für Nutzer und Anwendungen transparent, die mit dem Dateisystem als einem einzigen Bereitstellungspunkt interagieren. Es sind keine manuelle Datenmigration oder kein Verwaltungsaufwand erforderlich.

Hauptvorteile

  • Geringere Speicherkosten: Sie können den Preis pro Byte für große Datasets senken, indem Sie den Großteil Ihrer Daten auf kostengünstigem Volumenspeicher speichern.
  • Einzelner Namespace im Petabyte-Bereich: Konsolidieren Sie riesige, wachsende Datasets an einem einzigen Bereitstellungspunkt, ohne Daten manuell zwischen verschiedenen Speichersystemen migrieren oder abstufen zu müssen.
  • Intelligent und automatisiert: Ein transparentes Caching-System auf Blockebene sorgt dafür, dass Hochleistungsspeicher für die wichtigsten Daten verwendet wird.
  • Kombinierte Leistung: Sie erhalten eine Latenz von weniger als einer Millisekunde für aktive Daten und eine konsistente Latenz von einigen zehn Millisekunden für weniger häufig abgerufene Teile des Datasets.

Detaillierte Leistungsdaten

Wenn Sie die Best Practices unter Leistungsüberlegungen befolgen, können Sie mit Ihren Instanzen diese IOPS- und Metadatenleistungszahlen erreichen.

IOPS

Die maximalen IOPS skalieren linear pro TiB der bereitgestellten Instanzkapazität.

Durchsatzstufe Lese-IOPS (pro TiB) Schreib-IOPS (pro TiB)
125 MBps per TiB 725 700
250 MBps per TiB 1.450 1.400
500 MBps per TiB 2.900 2.800
1000 MBps per TiB 5.800 5.600
Dynamic 145 140

Metadatenvorgänge

Die maximale Anzahl von Metadatenvorgängen steigt schrittweise mit der Kapazität.

Jede Instanz erhält ihren ersten Schritt der Metadatenleistung bei der Mindestinstanzgröße, die kleiner als der Standardschritt für die Kapazität ist.

Bei größeren Instanzen steigt die Leistung jedes Mal, wenn die Gesamtkapazität ein Vielfaches der Schrittgröße überschreitet.

Leistungsstufe Kapazitätsinkrement (GiB) Dateistatistiken pro Schritt hinzugefügt Pro Schritt hinzugefügte Dateierstellungen Pro Schritt hinzugefügte Löschvorgänge für Dateien
1.000 MB/s pro TiB 72.000 410.000 pro Sekunde 115.000 pro Sekunde 95.000 pro Sekunde
500 MB/s pro TiB 144.000
250 MB/s pro TiB 288.000
125 MB/s pro TiB 576.000
Dynamisch 3.776.000 275.000 pro Sekunde 115.000 pro Sekunde 130.000 pro Sekunde

Beispiel: Für die Stufe mit 1.000 MB/s pro TiB beträgt die Kapazitätsinkrementgröße 72.000 GiB. Wenn Sie eine Instanz mit 153.000 GiB erstellen, erhalten Sie Metadatenleistung für drei Stufen:

  • Schritt 1: Gewährt bei der Mindestinstanzgröße.
  • Schritt 2: Wird gewährt,wenn die Kapazität 72.000 GiB überschreitet.
  • Schritt 3: Wird gewährt,wenn die Kapazität 144.000 GiB überschreitet.
  • Schritt 4: Nicht erreicht. Wird gewährt,wenn die Kapazität 216.000 GiB überschreitet.

Da 153.000 GiB zwischen den Grenzwerten von 144.000 GiB und 216.000 GiB liegt, erhält die Instanz drei Leistungsstufen: maximal 1.230.000 Dateistatistiken pro Sekunde (3 × 410.000).

Nächste Schritte