Managed Service for Apache Spark 组件

通过 Managed Service for Apache Spark 组件,您可以从 Gemini Enterprise Agent Platform Pipelines 中的流水线运行 Apache Spark 批处理工作负载。 Managed Service for Apache Spark 在托管式计算基础架构上运行批处理工作负载,根据需要自动扩缩资源。

详细了解 Managed Service for Apache Spark支持的 Spark 工作负载

在 Managed Service for Apache Spark 中,Batch 资源表示批量工作负载。 SDK 包含以下运算符,用于 创建 Batch 资源并监控其执行: Google Cloud

API 参考文档

教程

版本记录和版本说明

如需详细了解 Google Cloud 流水线组件 SDK 的版本历史记录和更改,请参阅Google Cloud 流水线组件 SDK 版本说明

技术支持联系人

如果您有任何疑问,请联系 kfp-dataproc-components@google.com