Cuando ejecutas tu canalización con Dataflow, puedes ver ese trabajo y cualquier otro mediante la interfaz de supervisión de Dataflow. La interfaz de supervisión te permite ver tus trabajos de Dataflow y también interactuar con ellos.
Puedes acceder a la interfaz de supervisión de Dataflow en la Google Cloud console.
Entre las tareas que puedes realizar con la interfaz de supervisión, se incluyen las siguientes:
- Consulta una lista de trabajos en ejecución, completados y con errores.
- Visualiza una representación gráfica de las etapas de un trabajo y el progreso de cada etapa.
- Visualiza gráficos de métricas de trabajos, como la actualidad de los datos, el uso de recursos y las solicitudes de E/S.
- Supervisa el costo estimado de un trabajo.
- Visualiza los registros de canalización.
- Identifica qué pasos pueden causar un retraso en la canalización.
- Identifica las causas de la latencia en tus fuentes y receptores.
- Comprende los errores de la canalización.
Componentes de la interfaz de supervisión
La interfaz de supervisión contiene los siguientes visualizadores y gráficos:
- Panel de supervisión del proyecto
- Un panel que supervisa tus trabajos de Dataflow a nivel de proyecto.
- Trabajos
- Una lista de todos los trabajos de Dataflow en ejecución y todos los trabajos que se ejecutan dentro de los últimos 30 días, junto con su estado, región, tiempo transcurrido y otra información.
- Gráfico del trabajo
- Una representación gráfica de una canalización. El gráfico del trabajo también proporciona un resumen del trabajo, un registro de trabajo y la información sobre cada paso de la canalización.
- Detalles de la ejecución
- Muestra las etapas de ejecución de un trabajo, la actualidad de los datos para trabajos de transmisión y el progreso del trabajador para trabajos por lotes.
- Métricas de trabajos
- Gráficos que muestran métricas durante la duración de un trabajo.
- Costo estimado
- El costo estimado de tu trabajo de Dataflow, según las métricas de uso de recursos.
- Recomendaciones
- Recomendaciones para mejorar el rendimiento del trabajo, reducir los costos y solucionar errores.
- Ajuste de escala automático
- Un conjunto de gráficos que te ayudan a comprender el comportamiento de ajuste de escala automático de los trabajos de transmisión.
- Alertas listas para usar
- Políticas de alertas preconfiguradas para trabajos de transmisión que supervisan el tiempo de procesamiento del backlog y el uso de recursos.
- Registros de canalización
- Registros emitidos por tu canalización y por el servicio de Dataflow.
- Muestreo de datos
- Una herramienta que te permite observar los datos muestreados en cada paso de una canalización.
¿Qué sigue?
- Habilita las alertas listas para usar para la supervisión automatizada de los trabajos de transmisión de Dataflow.
- Usa Cloud Monitoring para crear alertas personalizadas y ver métricas de Dataflow.
- Obtén más información sobre cómo compilar canalizaciones de datos listas para producción.
- Obtén información para solucionar problemas de tu canalización.