Google Cloud 提供开源 Dataflow 模板,您可以使用这些模板创建 Dataflow 作业。这些作业基于预构建的 Docker 映像,适用于使用Google Cloud 控制台、Google Cloud CLI 或 REST API 调用的常见应用场景。本页面列出了与 Spanner 相关的可用 Dataflow 模板。
批处理模板
使用以下模板可批量处理数据:
- 任何源数据库到 Spanner
- Cloud Storage Avro to Spanner
- Cloud Storage Text to Spanner
- Spanner to BigQuery
- Spanner to Cloud Storage Avro
- Spanner to Cloud Storage Text
- Spanner to Vertex AI Vector Search files on Cloud Storage
如需详细了解如何使用这些模板,请参阅使用 Dataflow 导入、导出和修改数据。
流处理模板
使用以下模板可持续处理数据:
- Datastream to Spanner
- Spanner 变更数据流到任何源数据库
- Spanner change streams to BigQuery
- Spanner change streams to Cloud Storage
- Spanner change streams to Pub/Sub
如需详细了解如何使用这些模板,请参阅使用 Dataflow 构建变更数据流连接。