Ringkasan Managed Service for Apache Spark di GKE

Managed Service untuk Apache Spark di GKE memungkinkan Anda menjalankan aplikasi Big Data menggunakan API Managed Service untuk Apache Spark jobs di cluster GKE. Gunakan Google Cloud konsol, Google Cloud CLI, atau Managed Service untuk Apache Spark API (permintaan HTTP atau Cloud Client Libraries) untuk membuat cluster virtual Managed Service untuk Apache Spark di GKE, lalu kirimkan tugas Spark, PySpark, SparkR, atau Spark-SQL ke layanan Managed Service untuk Apache Spark.

Managed Service untuk Apache Spark di GKE mendukung versi Spark 3.5.

Cara kerja Managed Service untuk Apache Spark di GKE

Managed Service untuk Apache Spark di GKE men-deploy cluster virtual Managed Service untuk Apache Spark di cluster GKE. Tidak seperti cluster Managed Service untuk Apache Spark di Compute Engine, cluster virtual Managed Service untuk Apache Spark di GKE tidak menyertakan VM master dan worker yang terpisah. Sebagai gantinya, saat Anda membuat cluster virtual Managed Service untuk Apache Spark di GKE, Managed Service untuk Apache Spark di GKE akan membuat kumpulan node dalam cluster GKE. Managed Service untuk Apache Spark di GKE dijalankan sebagai pod di node pool ini. Node pool dan penjadwalan pod di node pool dikelola oleh GKE.