Managed Service for Apache Spark bietet zwei Stufen: eine Standard-Stufe und eine Premium-Stufe (Hochleistung). Mit diesen Stufen können Sie Leistungsanforderungen und Funktionszugriff mit optimalen Kosten in Einklang bringen.
Vorteile der Premium-Stufe
Die Premium-Stufe unterscheidet sich von der Standard-Stufe durch zusätzliche Funktionen und Features. Die Premium-Stufe bietet erweiterte Abfragebeschleunigung sowie beschleunigte Rechen-, Laufwerks- und Arbeitsspeicherressourcen, die häufig für komplexe oder latenzempfindliche Arbeitslasten erforderlich sind.
Funktionen der Premium-Stufe
In der folgenden Tabelle sind die exklusiven Funktionen und Features der Premium-Stufe von Managed Service for Apache Spark aufgeführt.
| Funktion | Standard | Premium |
|---|---|---|
| Lightning Engine (Abfragebeschleunigung) |  |
(Standard: Aktiviert, außer für interaktive Sitzungen) |
| Interaktive Arbeitslasten (Sitzungen) | |
(Standard: Aktiviert) |
| Shuffle-intensive Jobs (Premium-Laufwerk) | |
(Standard: Deaktiviert) |
| Speicherintensive Jobs (erweiterter Arbeitsspeicher) | |
(Standard: Deaktiviert) |
| GPU-Unterstützung | |
(Standard: Deaktiviert) |
| Batch-Arbeitslasten | ||
| Autoscaling | ||
| Serverlose Spark-UI | ||
| Herkunft, Sicherheit und Compliance (VPC-SC, CMEK) |
Batcharbeitslasten und Sitzungen der Premium-Stufe
Für die folgenden Arbeitslasten und Sitzungen ist die Premium-Stufe erforderlich:
- Lightning Engine: Die Lightning Engine ist nur in der Premium-Stufe verfügbar und ist eine wichtige Funktion, die die Spark-Leistung durch optimierte Abfrageausführung beschleunigt. Sie ist standardmäßig aktiviert, wenn Sie die Premium-Stufe für Batch-Arbeitslasten auswählen, indem Sie das Attribut
dataproc.tieraufpremiumsetzen. - Interaktive Sitzungen: Interaktive Sitzungen werden automatisch als hochwertige Premium-Funktion behandelt. Sie werden über die Managed Service for Apache Spark Sessions API initiiert und zum Premium-DCU-Tarif abgerechnet. Sie bieten Funktionen wie Interaktivität mit niedriger Latenz und Zustandsverwaltung. Für interaktive Sitzungen aktivieren Sie die Lightning Engine, indem Sie das Attribut
spark.dataproc.engineauflightningEnginesetzen. - GPU-Unterstützung: Die GPU-Unterstützung ist nur in der Premium-Stufe verfügbar. Es ist standardmäßig deaktiviert. Sie aktivieren sie über Konfigurations-Flags. Für die GPU-Unterstützung wird eine spezielle Infrastruktur verwendet. Sie ist im Premium-DCU-Tarif enthalten, ohne dass zusätzliche Rechenkosten anfallen.
Kalkulierbares Preismodell für die Premium-Stufe
Die Premium-Stufe verwendet ein vereinfachtes, umfassendes Preismodell für die Kernfunktionen. Der Premium-DCU-Tarif deckt den Zugriff auf hochwertige Funktionen wie Lightning Engine, erweiterten Speicher und die spezialisierte Infrastruktur ab, die für Shuffle-intensive Jobs erforderlich ist. Wenn Sie diese Funktionen über Konfigurations-Flags aktivieren, sind sie im Basispreis für Premium-DCUs enthalten und es fallen keine zusätzlichen Rechenkosten an. Das bedeutet, dass Sie einen einzigen, vorhersehbaren Premium-Preis für den Zugriff auf die gesamte Suite der erweiterten Funktionen der Premium-Stufe zahlen.