Airflow géré (3e génération) | Airflow géré (2e génération) | Airflow géré (1re génération héritée)
Cette page explique comment accéder aux journaux Apache Airflow pour Managed Service pour Apache Airflow et les afficher.
À propos des types de journaux
Managed Service pour Apache Airflow comporte les journaux Airflow suivants :
Journaux de streaming. Ces journaux contiennent les journaux des tâches Airflow, ainsi que les journaux des composants Airflow de votre environnement, tels que les programmeurs et les nœuds de calcul Airflow.
Pour en savoir plus sur Cloud Logging et Cloud Monitoring pour votre environnement Managed Airflow, consultez la section Surveiller des environnements.
Journaux des tâches Airflow dans le bucket de l'environnement. Ces journaux sont associés à des tâches DAG uniques. Si vous activez l'enregistrement des journaux dans le bucket de l'environnement, Managed Airflow enregistre les fichiers contenant les journaux des tâches Airflow dans le dossier
/logs.Managed Service pour Apache Airflow génère des journaux d'audit, tels que les journaux d'activité d'administration. Pour en savoir plus, consultez la section Afficher les journaux d'audit.
Avant de commencer
Votre compte Google doit disposer d'un rôle permettant d'afficher des objets dans des buckets d'environnement. Pour plus d'informations, consultez la section Contrôle des accès.
Les journaux stockés dans le bucket de l'environnement utilisent la règle du bucket. Managed Airflow crée des buckets avec la règle par défaut qui conserve les données indéfiniment. Pour les journaux stockés dans Cloud Logging, Managed Airflow utilise
_Defaultet définies par l'utilisateur périodes de conservation des journaux.Pour éviter toute perte de données, les journaux enregistrés dans le bucket de l'environnement ne sont pas supprimés après la suppression de votre environnement. Vous devez supprimer manuellement les journaux du bucket de votre environnement.
Afficher les journaux de streaming
Pour afficher les journaux de streaming dans Cloud Logging, procédez comme suit :
Console
Dans la Google Cloud console, accédez à la page Environnements.
Dans la liste des environnements, cliquez sur le nom de votre environnement. La page Détails de l'environnement s'ouvre.
Accédez à l'onglet Journaux.
Afficher les journaux de streaming dans Cloud Logging
Pour afficher les journaux de streaming dans Cloud Logging, procédez comme suit :
Console
Dans la Google Cloud console, accédez à la page Environnements.
Dans la liste des environnements, recherchez votre environnement.
Dans la colonne Journaux, cliquez sur le lien Journaux.
Afficher les journaux des tâches Airflow dans le bucket de l'environnement
Pour afficher les journaux des tâches Airflow dans le bucket de votre environnement :
Console
Dans la Google Cloud console, accédez à la page Environnements.
Dans la liste des environnements, recherchez une ligne contenant le nom de votre environnement, puis dans la colonne Dossier des DAG , cliquez sur le lien DAG. La page Détails du bucket s'ouvre.
Dans le volet Explorateur de dossiers, cliquez sur
/logs.