Pasos posteriores a la implementación

En esta página, se te guiará por los pasos posteriores a la implementación de Cortex Framework para ejecutar tus canalizaciones de datos y verificar los resultados.

Después de ejecutar la implementación, todas las plantillas y configuraciones de transformación se compilan y se implementan en tu repositorio de Dataform de destino. Sin embargo, para materializar las tablas y las vistas en BigQuery, primero debes ejecutar las acciones de la canalización de Dataform.

Ejecuta las transformaciones en Dataform

Cuando ejecutas la canalización, inicias la transformación lógica de los datos sin procesar en capas de base de datos estandarizadas y listas para la IA, y en productos de datos, listos para el uso empresarial inmediato.

Puedes ejecutar acciones de forma manual en la Google Cloud consola de para realizar la verificación o configurar programas recurrentes para la producción.

Ejecución manual para la verificación

Para ejecutar una verificación manual de toda la canalización en tu espacio de trabajo de Dataform, sigue estos pasos:

  1. En la Google Cloud consola de, ve a la página Dataform.
  2. Confirma que seleccionaste el proyecto correcto en el menú desplegable del proyecto. Google Cloud
  3. Haz clic en el nombre del repositorio creado durante la implementación (p.ej., cortex).
  4. Haz clic en el nombre del espacio de trabajo (p.ej., cortex).
  5. Haz clic en Iniciar ejecución.
  6. Haz clic en Ejecutar acciones.
  7. Selecciona Todas las acciones. También puedes elegir subconjuntos clave de transformaciones seleccionando etiquetas o acciones específicas.
  8. Haz clic en Iniciar ejecución.

Verifica el éxito de la ejecución

Para supervisar el progreso y verificar si la canalización se completó correctamente, sigue estos pasos:

  1. Haz clic en la pestaña Ejecuciones para ver el historial de ejecución.
  2. Verifica que el estado sea Se completó correctamente.
  3. Haz clic en el vínculo de ejecución para inspeccionar los detalles de acciones específicas, los errores de compilación o los tiempos de ejecución.

Revisa los recursos de datos en BigQuery

Después de que se ejecute correctamente tu canalización de Dataform, verifica los conjuntos de datos generados y observa las tablas materializadas en BigQuery.

  1. Navega a BigQuery en la Google Cloud consola de.
  2. Ubica los conjuntos de datos de destino configurados en tu archivo config.yaml (p.ej., el conjunto de datos identificado por datasetId en la entrada data.targets a la que hace referencia el dataTargetId del módulo). Por ejemplo, en las configuraciones de la plantilla, estos pueden ser:
    • Capa de base de datos: Busca el conjunto de datos que coincida con tu ID de destino de base (configurado como cortex7_sap_data_foundation de forma predeterminada).
    • Capa de productos de datos: Busca el conjunto de datos que coincida con tu ID de destino de producto (configurado como cortex7_data_products de forma predeterminada).
  3. Obtén una vista previa de las tablas y ejecuta consultas de muestra para verificar que se propaguen con los registros esperados.

Próximos pasos

Ahora que tus sistemas de datos están operativos, puedes explorar lo siguiente: