Cloud Storage bietet eine Vielzahl von Optionen, mit denen Sie Ihren Datenspeicher für Anwendungsfälle optimieren können, die eine hohe Leistung erfordern, z. B. künstliche Intelligenz (KI), maschinelles Lernen (ML) und datenintensive Analysen. Auf dieser Seite werden diese Optionen vorgestellt und Sie erhalten eine Anleitung zur Auswahl einer Option, die den Anforderungen Ihrer Arbeitslasten entspricht.
Die Cloud Storage Rapid-Produktfamilie
Cloud Storage Rapid ist eine Familie von leistungsstarken Produkten in Cloud Storage, die entwickelt wurden, um Datenengpässe für Ihre KI-/ML- und Datenanalyse-Arbeitslasten zu beseitigen. Da KI-/ML-Modelle immer komplexer werden und Datasets Petabyte-Größen erreichen, wird die Speicherleistung häufig zum primären Engpass für teure GPU- und TPU-Cluster. Cloud Storage Rapid nutzt zonale Architekturen, um Ihre Daten näher an Ihre Rechenressourcen zu bringen. So können Sie die Auslastung Ihrer Beschleuniger maximieren, die Trainingszeiten verkürzen und die Gesamtbetriebskosten für Ihre anspruchsvollsten Arbeitslasten senken. Cloud Storage Rapid umfasst Rapid Bucket und Anywhere Cache.
Daten in der Rapid Storage-Klasse mit Rapid Bucket speichern
Rapid Bucket ist eine leistungsstarke zonale Objektspeicherlösung, mit der Sie Daten in der Speicherklasse „Rapid“ speichern können, indem Sie eine Zone als Speicherort eines Buckets definieren. Mit Rapid Bucket können Sie Ihre Daten in derselben physischen Zone wie Ihre KI-Beschleuniger platzieren und so die niedrigste Latenz und den höchsten Durchsatz unter den anderen Cloud Storage-Produkten erzielen. Rapid Bucket bietet eine Latenz von unter einer Millisekunde, einen aggregierten Durchsatz von bis zu 15 TB/s und unterstützt bis zu 20 Millionen Abfragen pro Sekunde.
Rapid Bucket unterstützt zustandsbehaftete Streaming-Objektanhänge, sodass Anwendungen Daten in Echtzeit in vorhandene Objekte schreiben können. So lassen sich teure Objektüberschreibungen vermeiden und Daten sind sofort sichtbar. Nutzeranwendungen können Daten lesen, während sie geschrieben werden.
Am besten geeignet für: Training, Prüfpunkte und Bereitstellung von KI-Modellen, die eine extrem niedrige Latenz und eine hohe deterministische Leistung erfordern
Diese Option ist für Sie geeignet, wenn Sie eine dedizierte hohe Leistung für Lese- und Schreibvorgänge benötigen.
Informationen zum Erstellen zonaler Buckets mit Rapid Bucket finden Sie unter Zonale Buckets erstellen.
Zonale Caches mit Anywhere Cache erstellen
Anywhere Cache ist ein vollständig verwalteter, SSD-gestützter zonenbasierter Lesecache, der mit Ihren vorhandenen regionalen, dualregionalen oder multiregionalen Buckets funktioniert, ohne dass API-Änderungen erforderlich sind. Ein Cache bietet temporären Speicherplatz und Bandbreite, die automatisch hoch- oder herunterskaliert werden, je nach den Anforderungen Ihrer Arbeitslasten. Daten werden automatisch von Ihrem Bucket in den Cache aufgenommen, wenn sie von einer VM gelesen werden, die sich in derselben Zone wie der Cache befindet.
Anywhere Cache bietet einen aggregierten Durchsatz von 2,5 TB/s und reduziert die Latenz für schnellere Lesevorgänge, indem Ihre Daten in denselben Zonen wie Ihre VMs platziert werden. Daten, die aus einem Cache bereitgestellt werden, sind nicht nur schneller verfügbar, sondern können auch zu geringeren Gebühren für die Datenübertragung, den Datenabruf und den Betrieb führen als Daten, die direkt aus einem Bucket bereitgestellt werden. Weitere Informationen finden Sie unter Vorteile von Anywhere Cache.
Am besten geeignet für: Training, Wiederherstellung von Prüfpunkten und Bereitstellung von KI-Modellen, die eine hohe Lesebandbreite aus einem vorhandenen Cloud Storage-Bucket erfordern
Verwenden Sie diese Option, wenn: Sie bereits Daten in einem Cloud Storage-Bucket gespeichert haben, die Sie beschleunigen möchten.
Informationen zur Verwendung von Anywhere Cache finden Sie unter Caches erstellen und verwalten.