Managed Service for Apache Spark bietet zwei Stufen: eine Standardstufe und eine Premiumstufe (hohe Leistung). So können Kunden Leistungsanforderungen und Feature-Zugriff optimal auf die Kosten abstimmen.
Vorteile der Premiumstufe
Die Premiumstufe unterscheidet sich von der Standardstufe durch zusätzliche Funktionen und Features. Die Premiumstufe bietet eine erweiterte Abfragebeschleunigung sowie eine beschleunigte Rechenleistung, Festplattenleistung und Arbeitsspeicherleistung, die häufig für komplexe oder latenzempfindliche Arbeitslasten erforderlich sind.
Funktionen und Möglichkeiten der Premiumstufe
In der folgenden Tabelle sind die exklusiven Funktionen und Möglichkeiten der Premiumstufe von Managed Service for Apache Spark aufgeführt.
| Funktion | Standard | Premium |
|---|---|---|
| Lightning Engine (Abfragebeschleunigung) |  |
(Standard: aktiviert, außer für interaktive Sitzungen) |
| Interaktive Arbeitslasten (Sitzungen) | |
(Standard: aktiviert) |
| Shuffle-intensive Jobs (Premium-Festplatte) | |
(Standard: deaktiviert) |
| Arbeitsspeicherintensive Jobs (erweiterter Arbeitsspeicher) | |
(Standard: deaktiviert) |
| GPU-Unterstützung | |
(Standard: deaktiviert) |
| Batch-Arbeitslasten | ||
| Autoscaling | ||
| Serverlose Spark-UI | ||
| Lineage, Sicherheit und Compliance (VPC-SC, CMEK) |
Batch-Arbeitslasten und -Sitzungen der Premiumstufe
Für die folgenden Arbeitslasten und Sitzungen ist die Premiumstufe erforderlich:
- Lightning Engine: Die Lightning Engine ist exklusiv in der Premiumstufe verfügbar und eine wichtige Funktion, die die Spark-Leistung durch optimierte Abfrageausführung beschleunigt. Sie ist standardmäßig aktiviert, wenn Sie die Premiumstufe für Batch-Arbeitslasten auswählen, indem Sie die Eigenschaft
dataproc.tieraufpremiumsetzen. - Interaktive Sitzungen:Interaktive Sitzungen werden automatisch als hochwertiges Premium-Feature behandelt. Sie werden über die Managed Service for Apache Spark Sessions API initiiert und zum Premium-DCU-Tarif abgerechnet. Sie bieten Funktionen wie Interaktivität mit geringer Latenz und Statusverwaltung. Für interaktive Sitzungen aktivieren Sie die Lightning Engine, indem Sie die Eigenschaft
spark.dataproc.engineauflightningEnginesetzen. - GPU-Unterstützung:Die GPU-Unterstützung ist nur in der Premiumstufe verfügbar. Sie ist standardmäßig deaktiviert. Sie können sie über Konfigurations-Flags aktivieren. Die GPU-Unterstützung verwendet eine spezielle Infrastruktur und wird zum Premium-DCU-Tarif ohne zusätzliche Rechenkosten abgerechnet.
Vorhersehbares Preismodell für die Premiumstufe
Die Premiumstufe verwendet ein vereinfachtes Pauschalpreismodell für die Kernfunktionen. Der Premium-DCU-Tarif umfasst den Zugriff auf hochwertige Funktionen wie die Lightning Engine, den erweiterten Arbeitsspeicher und die spezielle Infrastruktur, die für Shuffle-intensive Jobs erforderlich ist. Wenn Sie diese Funktionen über Konfigurations-Flags aktivieren, sind sie im Premium-DCU-Basistarif enthalten und verursachen keine zusätzlichen Rechenkosten. Das bedeutet, dass Sie einen einzigen, vorhersehbaren Premiumtarif für den Zugriff auf die vollständige Suite der erweiterten Funktionen der Premiumstufe zahlen.