Melihat log Airflow

Managed Airflow (Gen 3) | Managed Airflow (Gen 2) | Managed Airflow (Gen 1 Lama)

Halaman ini menjelaskan cara mengakses dan melihat log Apache Airflow untuk Managed Service untuk Apache Airflow.

Tentang jenis log

Managed Service untuk Apache Airflow memiliki log Airflow berikut:

  • Log streaming. Log ini berisi log tugas Airflow, serta log komponen Airflow di lingkungan Anda, seperti penjadwal dan pekerja Airflow.

    Untuk mempelajari Cloud Logging dan Cloud Monitoring untuk lingkungan Managed Airflow Anda, lihat Memantau lingkungan.

  • Log tugas Airflow di bucket lingkungan. Log ini terkait dengan tugas DAG tunggal. Managed Airflow menyimpan file dengan log tugas Airflow ke folder /logs.

  • Managed Service untuk Apache Airflow menghasilkan log audit, seperti log Aktivitas Admin. Untuk mengetahui informasi selengkapnya, lihat Melihat log audit.

Sebelum memulai

  • Akun Google Anda harus memiliki peran yang dapat melihat objek di bucket lingkungan. Untuk mengetahui informasi selengkapnya, lihat Kontrol akses.

  • Log yang disimpan di bucket lingkungan menggunakan kebijakan bucket. Managed Airflow membuat bucket dengan kebijakan default yang menyimpan data selamanya. Untuk log yang disimpan di Cloud Logging, Managed Airflow menggunakan _Default dan yang Ditentukan Pengguna periode retensi log.

  • Untuk mencegah kehilangan data, log yang disimpan di bucket lingkungan tidak akan dihapus setelah Anda menghapus lingkungan. Anda harus menghapus log secara manual dari bucket lingkungan.

Melihat log streaming

Untuk melihat log streaming di Cloud Logging:

Konsol

  1. Di Google Cloud konsol, buka halaman Environments.

    Buka Environments

  2. Di daftar lingkungan, klik nama lingkungan Anda. Halaman Environment details akan terbuka.

  3. Buka tab Logs.

Melihat log streaming di Cloud Logging

Untuk melihat log streaming di Cloud Logging:

Konsol

  1. Di Google Cloud konsol, buka halaman Environments.

    Buka Environments

  2. Di daftar lingkungan, temukan lingkungan Anda.

  3. Di kolom Logs, klik link Logs.

Melihat log tugas Airflow di bucket lingkungan

Untuk melihat log tugas Airflow di bucket lingkungan Anda:

Konsol

  1. Di konsol Google Cloud , buka halaman Environments.

    Buka Environments

  2. Di daftar lingkungan, temukan baris dengan nama lingkungan Anda, lalu di kolom DAGs folder , klik link DAGs. Halaman Bucket details akan terbuka.

  3. Di panel Folder browser, klik /logs.

Langkah berikutnya