Managed Airflow(第 3 代) | Managed Airflow(第 2 代) | Managed Airflow(旧版第 1 代)
本页面介绍如何访问和查看 Managed Service for Apache Airflow 的 Apache Airflow 日志。
日志类型简介
Managed Service for Apache Airflow 具有以下 Airflow 日志:
流式传输日志。这些日志包含 Airflow 任务日志,以及环境的 Airflow 组件(例如 Airflow 调度器和工作器)的日志。
如需了解适用于您的 Managed Airflow 环境的 Cloud Logging 和 Cloud Monitoring,请参阅 监控环境。
环境的存储桶中的 Airflow 任务日志。这些日志与单一 DAG 任务关联。 如果您 启用将日志保存到环境的存储桶, Managed Airflow 会将包含 Airflow 任务日志的文件保存到
/logs文件夹。Managed Service for Apache Airflow 会生成 审核日志,例如管理员 活动日志。如需了解详情,请参阅 查看审核日志。
准备工作
您的 Google 账号必须具有可以查看环境存储分区中的对象的角色。如需了解详情,请参阅访问权限控制。
存储在环境的存储桶中的日志使用该存储桶的政策。 Managed Airflow 会使用默认政策创建存储分区,该政策会永久保留数据。对于存储在 Cloud Logging 中的日志, Managed Airflow 使用
_Default和用户定义的 日志保留期限。为了防止数据丢失,在您删除环境后,保存在环境的存储桶中的日志不会被删除 。您必须手动从环境的存储桶中删除日志。
查看流式传输日志
如需在 Cloud Logging 中查看流式传输日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往 环境 页面。
在环境列表中,点击您的环境名称。环境详情 页面会打开。
前往日志 标签页。
在 Cloud Logging 中查看流式传输日志
如需在 Cloud Logging 中查看流式传输日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往 环境 页面。
在环境列表中,找到您的环境。
在日志 列中,点击日志 链接。
在环境的存储桶中查看 Airflow 任务日志
如需在环境的存储桶中查看 Airflow 任务日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往环境 页面。
在环境列表中,找到包含您的环境名称的行,然后在 DAG 文件夹 列中点击 DAG 链接。存储分区详情 页面会打开。
在文件夹浏览器 窗格中,点击
/logs。