Los componentes de Managed Service for Apache Spark te permiten ejecutar cargas de trabajo por lotes de Apache Spark desde una canalización dentro de Vertex AI Pipelines. Managed Service for Apache Spark ejecuta las cargas de trabajo por lotes en una infraestructura de procesamiento administrada, con ajuste de escala automático de los recursos según sea necesario.
Obtén más información sobre Managed Service for Apache Spark y las cargas de trabajo compatibles con Spark.
En Managed Service for Apache Spark, un recurso Batch representa una carga de trabajo por lotes.
El Google Cloud SDK incluye los siguientes operadores para
crear Batch recursos y supervisar su ejecución:
Referencia de la API
Para ver la referencia del componente, consulta la Google Cloud referencia del SDK para los componentes de Managed Service for Apache Spark .
Para obtener información de referencia de los recursos de Managed Service for Apache Spark, consulta la siguiente página de referencia de la API:
Batchrecurso
Instructivos
Historial de versiones y notas de la versión
Para obtener más información sobre el historial de versiones y los cambios en el Google Cloud SDK de componentes de canalización, consulta las Google Cloud notas de la versión del SDK de componentes de canalización.
Contactos de asistencia técnica
Si tienes alguna pregunta, comunícate con kfp-dataproc-components@google.com.