Apache Spark용 서버리스 템플릿을 사용하여 코드를 작성하지 않고도 일반적인 Spark 일괄 워크로드를 빠르게 설정하고 실행할 수 있습니다.
Apache Spark용 서버리스 템플릿
다음 Apache Spark용 서버리스 템플릿은 Java 템플릿입니다. Python 템플릿은 GitHub GoogleCloudPlatform/dataproc-templates/python 저장소를, Jupyter 노트북의 Python 템플릿은 GoogleCloudPlatform/dataproc-templates/notebook 저장소를 참조하세요.
gcloud CLI 또는 Dataproc API를 사용하여 다음 Apache Spark용 서버리스 템플릿을 실행할 수 있습니다.
- Cloud Spanner to Cloud Storage
- Cloud Storage to BigQuery
- Cloud Storage to Cloud Spanner
- Cloud Storage to Cloud Storage
- Cloud Storage to JDBC
- Hive to BigQuery
- Hive to Cloud Storage
- JDBC to BigQuery
- JDBC to Cloud Spanner
- JDBC to Cloud Storage
- JDBC to JDBC
- Pub/Sub to Cloud Storage