Airflow géré (3e génération) | Airflow géré (2e génération) | Airflow géré (ancienne 1re génération)
Cette page explique comment accéder aux journaux Apache Airflow pour Managed Service pour Apache Airflow et les afficher.
À propos des types de journaux
Managed Service pour Apache Airflow comporte les journaux Airflow suivants :
Journaux de streaming Ces journaux contiennent les journaux des tâches Airflow, ainsi que les journaux des composants Airflow de votre environnement, tels que les programmeurs et les nœuds de calcul Airflow.
Pour en savoir plus sur Cloud Logging et Cloud Monitoring pour votre environnement Managed Airflow, consultez Surveiller des environnements.
Journaux des tâches Airflow dans le bucket de l'environnement Ces journaux sont associés à des tâches DAG uniques. Managed Airflow enregistre les fichiers contenant les journaux des tâches Airflow dans le dossier
/logs.Managed Service pour Apache Airflow génère des journaux d'audit, tels que les journaux d'activité d'administration. Pour en savoir plus, consultez Afficher les journaux d'audit.
Avant de commencer
Votre compte Google doit disposer d'un rôle permettant d'afficher des objets dans des buckets d'environnement. Pour plus d'informations, consultez la section Contrôle des accès.
Les journaux stockés dans le bucket de l'environnement utilisent la règle du bucket. Managed Airflow crée des buckets avec la règle par défaut qui conserve les données indéfiniment. Pour les journaux stockés dans Cloud Logging, Managed Airflow utilise des périodes de conservation des journaux
_Defaultet définies par l'utilisateur.Pour éviter toute perte de données, les journaux enregistrés dans le bucket de l'environnement ne sont pas supprimés après la suppression de votre environnement. Vous devez supprimer manuellement les journaux du bucket de votre environnement.
Afficher les journaux de streaming
Pour afficher les journaux de streaming dans Cloud Logging :
Console
Dans la console Google Cloud , accédez à la page Environnements.
Dans la liste des environnements, cliquez sur le nom de votre environnement. La page Détails de l'environnement s'ouvre.
Accédez à l'onglet Journaux.
Afficher les journaux de streaming dans Cloud Logging
Pour afficher les journaux de streaming dans Cloud Logging :
Console
Dans la console Google Cloud , accédez à la page Environnements.
Dans la liste des environnements, recherchez le vôtre.
Dans la colonne Journaux, cliquez sur le lien Journaux.
Afficher les journaux de tâches Airflow dans le bucket de l'environnement
Pour afficher les journaux des tâches Airflow dans le bucket de votre environnement :
Console
Dans la console Google Cloud , accédez à la page Environnements.
Dans la liste des environnements, recherchez une ligne portant le nom de votre environnement, puis cliquez sur le lien DAG dans la colonne Dossier des DAG. La page Détails du bucket s'ouvre.
Dans le volet Navigateur de dossiers, cliquez sur
/logs.