Logging audit Data Lineage API

Cloud Audit Logs untuk Data Lineage API di Knowledge Catalog (sebelumnya Dataplex Universal Catalog) memungkinkan Anda mencatat operasi akses data dan administratif pada resource silsilah data Anda. Anda dapat menggunakan log ini untuk memantau perubahan konfigurasi silsilah, melacak aktivitas di seluruh proses, operasi, dan peristiwa, serta memverifikasi keamanan dan kepatuhan di seluruh project Google Cloud Anda. Untuk informasi selengkapnya tentang silsilah data, lihat Tentang silsilah data.

Untuk informasi selengkapnya tentang Cloud Audit Logs, lihat referensi berikut:

Nama layanan

Untuk melihat log audit Data Lineage API, lakukan hal berikut:

  1. Di konsol Google Cloud , buka halaman Logs Explorer:

    Buka Logs Explorer

  2. Salin dan tempel kueri berikut ke kolom Query di Logs Explorer, lalu klik Run query.

        protoPayload.serviceName="datalineage.googleapis.com"

Metode menurut jenis izin

Setiap izin IAM memiliki properti type, yang nilainya adalah enum yang dapat berupa salah satu dari empat nilai: ADMIN_READ, ADMIN_WRITE, DATA_READ, atau DATA_WRITE. Saat Anda memanggil metode, Data Lineage API akan membuat log audit yang kategorinya bergantung pada properti type dari izin yang diperlukan untuk menjalankan metode. Metode yang memerlukan izin IAM dengan nilai properti type DATA_READ, DATA_WRITE, atau ADMIN_READ akan menghasilkan log audit Akses Data. Metode yang memerlukan izin IAM dengan nilai properti type dari ADMIN_WRITE akan menghasilkan log audit Aktivitas Admin.

Metode API dalam daftar berikut yang ditandai dengan (LRO) adalah operasi yang berjalan lama (LRO). Metode ini biasanya menghasilkan dua entri log audit: satu saat operasi dimulai dan satu lagi saat operasi berakhir. Untuk mengetahui informasi selengkapnya, lihat Log audit untuk operasi yang berjalan lama.
Jenis izin Metode
ADMIN_READ google.longrunning.Operations.GetOperation
DATA_READ google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig
google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses
google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.GetProcess
google.cloud.datacatalog.lineage.v1.Lineage.GetRun
google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents
google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses
google.cloud.datacatalog.lineage.v1.Lineage.ListRuns
google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming
google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks
DATA_WRITE google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig
google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess
google.cloud.datacatalog.lineage.v1.Lineage.CreateRun
google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess (LRO)
google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun (LRO)
google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent
google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess
google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun

Log audit antarmuka API

Untuk mengetahui informasi tentang cara dan izin mana yang dievaluasi untuk setiap metode, lihat dokumentasi Identity and Access Management untuk Data Lineage API.

google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.

GetConfig

  • Metode: google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.configs.get - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig"

UpdateConfig

  • Metode: google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.configs.update - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter untuk metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig"

google.cloud.datacatalog.lineage.v1.Lineage

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.cloud.datacatalog.lineage.v1.Lineage.

BatchSearchLinkProcesses

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.locations.searchLinks - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses"

CreateLineageEvent

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.events.create - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent"

CreateProcess

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.processes.create - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess"

CreateRun

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.CreateRun
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.runs.create - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateRun"

DeleteLineageEvent

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.events.delete - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent"

DeleteProcess

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.processes.delete - DATA_WRITE
  • Metode adalah operasi streaming atau yang berjalan lama: Operasi yang berjalan lama
  • Filter untuk metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess"

DeleteRun

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.runs.delete - DATA_WRITE
  • Metode adalah operasi streaming atau yang berjalan lama: Operasi yang berjalan lama
  • Filter untuk metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun"

GetLineageEvent

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.events.get - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent"

GetProcess

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.GetProcess
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.processes.get - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetProcess"

GetRun

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.GetRun
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.runs.get - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetRun"

ListLineageEvents

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.events.list - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents"

ListProcesses

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.processes.list - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses"

ListRuns

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.ListRuns
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.runs.list - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListRuns"

ProcessOpenLineageRunEvent

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.locations.processOpenLineageMessage - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent"

SearchLineageStreaming

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.locations.searchLinks - DATA_READ
  • Metode adalah operasi streaming atau yang berjalan lama: Streaming RPC
  • Filter untuk metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming"
  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.locations.searchLinks - DATA_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks"

UpdateProcess

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.processes.update - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess"

UpdateRun

  • Metode: google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.runs.update - DATA_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter untuk metode ini: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun"

google.longrunning.Operations

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.longrunning.Operations.

GetOperation

  • Metode: google.longrunning.Operations.GetOperation
  • Jenis log audit: Akses data
  • Izin:
    • datalineage.operations.get - ADMIN_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="google.longrunning.Operations.GetOperation"

Metode yang tidak menghasilkan log audit

Metode mungkin tidak menghasilkan log audit karena satu atau beberapa alasan berikut:

  • Ini adalah metode bervolume tinggi yang melibatkan biaya pembuatan dan penyimpanan log yang signifikan.
  • Nilai auditnya rendah.
  • Audit atau log platform lain sudah menyediakan cakupan metode.

Metode berikut tidak menghasilkan log audit:

  • google.longrunning.Operations.CancelOperation
  • google.longrunning.Operations.DeleteOperation
  • google.longrunning.Operations.ListOperations
  • google.longrunning.Operations.WaitOperation