Serverless untuk Apache Spark menawarkan dua tingkat, yaitu tingkat standar dan tingkat premium (performa tinggi), sehingga pelanggan dapat menyelaraskan persyaratan performa dan akses fitur dengan biaya yang optimal.
Manfaat tingkat Premium
Versi premium berbeda dari versi standar karena kemampuan dan fitur tambahan yang dimilikinya. Tingkat premium menyediakan akselerasi kueri lanjutan, serta komputasi, disk, dan memori yang dipercepat yang sering kali diperlukan oleh beban kerja yang kompleks atau sensitif terhadap latensi.
Fitur dan kemampuan paket premium
Tabel berikut menyoroti fitur dan kemampuan eksklusif paket premium Serverless for Apache Spark.
| Fitur | Standar | Premium |
|---|---|---|
| Lightning Engine (Percepatan Kueri) |  |
(Default: Diaktifkan, kecuali untuk sesi interaktif) |
| Workload Interaktif (Sesi) | |
(Default: Diaktifkan) |
| Pekerjaan dengan Pengacakan Intensif (Disk Premium) | |
(Default: Nonaktif) |
| Pekerjaan Intensif Memori (Memori yang Diperluas) | |
(Default: Nonaktif) |
| Dukungan GPU | |
(Default: Nonaktif) |
| Beban kerja batch | ||
| Penskalaan otomatis | ||
| UI Serverless Spark | ||
| Silsilah, Keamanan dan Kepatuhan (VPC-SC, CMEK) |
Sesi dan workload batch tingkat premium
Workload dan sesi berikut memerlukan tingkat premium:
- Lightning Engine: Tersedia secara eksklusif di paket premium, Lightning Engine adalah fitur penting yang mempercepat performa Spark melalui eksekusi kueri yang dioptimalkan. Fitur ini diaktifkan secara default saat Anda memilih tingkat premium untuk workload batch dengan menyetel properti
dataproc.tierkepremium. - Sesi interaktif: Sesi interaktif secara otomatis diperlakukan sebagai fitur premium bernilai tinggi. Sesi ini dimulai melalui API sesi Dataproc, dan ditagih dengan tarif DCU premium, yang menyediakan kemampuan seperti interaktivitas latensi rendah dan pengelolaan status. Untuk sesi interaktif, Anda mengaktifkan Lightning Engine dengan menyetel properti
spark.dataproc.enginekelightningEngine. - Dukungan GPU: Dukungan GPU hanya tersedia di paket premium. Setelan ini dinonaktifkan secara default. Anda mengaktifkannya melalui tanda konfigurasi. Dukungan GPU menggunakan infrastruktur khusus, dan tercakup dalam tarif DCU premium tanpa biaya komputasi tambahan.
Model harga tingkat premium yang dapat diprediksi
Paket premium menggunakan model harga sederhana dan mencakup semua untuk kemampuan intinya. Tarif DCU premium mencakup akses ke fitur bernilai tinggi seperti Lightning Engine, Memori Tambahan, dan infrastruktur khusus yang diperlukan untuk tugas intensif shuffle. Jika Anda mengaktifkan fitur ini melalui tanda konfigurasi, fitur tersebut akan disertakan dalam tarif DCU premium dasar dan tidak dikenai biaya komputasi tambahan. Artinya, Anda membayar tarif premi tunggal yang dapat diprediksi untuk mengakses rangkaian lengkap kemampuan lanjutan tingkat premium.