Ringkasan Managed Service for Apache Spark di GKE

Managed Service untuk Apache Spark di Google Kubernetes Engine (GKE) memungkinkan Anda menjalankan aplikasi big data menggunakan API jobs Managed Service untuk Apache Spark di cluster GKE. Anda dapat menggunakan konsol Google Cloud , Google Cloud CLI, atau Managed Service untuk Apache Spark API (permintaan HTTP atau Library Klien Cloud) untuk membuat Managed Service untuk Apache Spark di cluster virtual GKE, lalu mengirimkan tugas Spark, PySpark, SparkR, atau Spark-SQL ke layanan Managed Service untuk Apache Spark.

Managed Service untuk Apache Spark di GKE mendukung Spark versi 3.5.

Cara kerja Managed Service untuk Apache Spark di GKE

Managed Service untuk Apache Spark on GKE men-deploy cluster virtual Managed Service untuk Apache Spark di cluster GKE. Tidak seperti cluster Managed Service untuk Apache Spark di Compute Engine, cluster virtual Managed Service untuk Apache Spark di GKE tidak menyertakan VM master dan worker yang terpisah. Sebagai gantinya, saat Anda membuat cluster virtual Managed Service untuk Apache Spark di GKE, Managed Service untuk Apache Spark di GKE akan membuat node pool dalam cluster GKE. Tugas Managed Service untuk Apache Spark di GKE dijalankan sebagai pod di node pool ini. Node pool dan penjadwalan pod di node pool dikelola oleh GKE.