Audit-Logging für die Data Lineage API

Mit Cloud-Audit-Logs für die Data Lineage API in Knowledge Catalog (früher Dataplex Universal Catalog) können Sie Verwaltungs- und Datenzugriffsvorgänge für Ihre Datenherkunftsressourcen aufzeichnen. Mit diesen Logs können Sie Änderungen an der Herkunftskonfiguration überwachen, Aktivitäten über Prozesse, Ausführungen und Ereignisse hinweg verfolgen und die Sicherheit und Compliance in Ihren Google Cloud -Projekten überprüfen. Weitere Informationen zur Datenherkunft finden Sie unter Datenherkunft.

Weitere Informationen zu Cloud-Audit-Logs finden Sie unter den folgenden Links:

Dienstname

So rufen Sie die Audit-Logs für die Data Lineage API auf:

  1. Rufen Sie in der Google Cloud Console die Seite „Log-Explorer“ auf:

    Zum Log-Explorer

  2. Kopieren Sie die folgende Abfrage und fügen Sie sie in das Feld Abfrage des Log-Explorers ein. Klicken Sie dann auf Abfrage ausführen.

        protoPayload.serviceName="datalineage.googleapis.com"
      

Methoden nach Berechtigungstyp

Jede IAM-Berechtigung hat ein type-Attribut, das ein „enum“ ist und einen der folgenden vier Werte haben kann: ADMIN_READ, ADMIN_WRITE, DATA_READ oder DATA_WRITE. Wenn Sie eine Methode aufrufen, generiert die Data Lineage API ein Audit-Log, dessen Kategorie vom Attribut type der Berechtigung abhängt, die für die Ausführung der Methode erforderlich ist. Methoden, die eine IAM-Berechtigung mit dem type-Attributwert DATA_READ, DATA_WRITE oder ADMIN_READ erfordern, generieren Audit-Logs zum Datenzugriff. Methoden, die eine IAM-Berechtigung mit dem type-Attributwert ADMIN_WRITE erfordern, generieren Audit-Logs zur Administratoraktivität.

API-Methoden in der folgenden Liste, die mit (LRO) gekennzeichnet sind, sind Vorgänge mit langer Ausführungszeit. Diese Methoden generieren in der Regel zwei Audit-Logeinträge: einen beim Starten und einen beim Beenden des Vorgangs. Weitere Informationen finden Sie unter Audit-Logs für Vorgänge mit langer Ausführungszeit.
Berechtigungstyp Methoden
ADMIN_READ google.longrunning.Operations.GetOperation
DATA_READ google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig
google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses
google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.GetProcess
google.cloud.datacatalog.lineage.v1.Lineage.GetRun
google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents
google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses
google.cloud.datacatalog.lineage.v1.Lineage.ListRuns
google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming
google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks
DATA_WRITE google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig
google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess
google.cloud.datacatalog.lineage.v1.Lineage.CreateRun
google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent
google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess (LRO)
google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun (LRO)
google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent
google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess
google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun

Audit-Logs der API-Schnittstelle

Informationen dazu, wie und welche Berechtigungen für die einzelnen Methoden evaluiert werden, finden Sie in der Dokumentation zu Identity and Access Management für die Data Lineage API.

google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService

Die folgenden Audit-Logs sind Methoden zugeordnet, die zu google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService gehören.

GetConfig

  • Methode: google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.configs.get - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.GetConfig"

UpdateConfig

  • Methode: google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.configs.update - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.configmanagement.v1.ConfigManagementService.UpdateConfig"

google.cloud.datacatalog.lineage.v1.Lineage

Die folgenden Audit-Logs sind Methoden zugeordnet, die zu google.cloud.datacatalog.lineage.v1.Lineage gehören.

BatchSearchLinkProcesses

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.locations.searchLinks - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.BatchSearchLinkProcesses"

CreateLineageEvent

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.events.create - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateLineageEvent"

CreateProcess

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.processes.create - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateProcess"

CreateRun

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.CreateRun
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.runs.create - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.CreateRun"

DeleteLineageEvent

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.events.delete - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteLineageEvent"

DeleteProcess

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.processes.delete - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Vorgang mit langer Ausführungszeit
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteProcess"

DeleteRun

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.runs.delete - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Vorgang mit langer Ausführungszeit
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.DeleteRun"

GetLineageEvent

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.events.get - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetLineageEvent"

GetProcess

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.GetProcess
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.processes.get - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetProcess"

GetRun

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.GetRun
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.runs.get - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.GetRun"

ListLineageEvents

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.events.list - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListLineageEvents"

ListProcesses

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.processes.list - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListProcesses"

ListRuns

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.ListRuns
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.runs.list - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ListRuns"

ProcessOpenLineageRunEvent

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.locations.processOpenLineageMessage - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.ProcessOpenLineageRunEvent"

SearchLineageStreaming

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.locations.searchLinks - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder Streamingvorgang: Streaming-RPC
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.SearchLineageStreaming"
  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.locations.searchLinks - DATA_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.SearchLinks"

UpdateProcess

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.processes.update - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.UpdateProcess"

UpdateRun

  • Methode: google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.runs.update - DATA_WRITE
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.cloud.datacatalog.lineage.v1.Lineage.UpdateRun"

google.longrunning.Operations

Die folgenden Audit-Logs sind Methoden zugeordnet, die zu google.longrunning.Operations gehören.

GetOperation

  • Methode: google.longrunning.Operations.GetOperation
  • Audit-Logtyp: Datenzugriff
  • Berechtigungen:
    • datalineage.operations.get - ADMIN_READ
  • Methode ist ein Vorgang mit langer Ausführungszeit oder ein Streamingvorgang: Nein.
  • Filter für diese Methode: protoPayload.methodName="google.longrunning.Operations.GetOperation"

Methoden, die keine Audit-Logs generieren

Folgende Gründe können dazu führen, dass eine Methode möglicherweise keine Audit-Logs generiert:

  • Es ist eine Methode mit hohem Volumen, die erhebliche Kosten für die Generierung und Speicherung von Logs erzeugt.
  • Die Methode hat einen geringen Audit-Wert.
  • Die Methode wird bereits von einem anderen Audit- oder Plattformlog abgedeckt.

Die folgenden Methoden generieren keine Audit-Logs:

  • google.longrunning.Operations.CancelOperation
  • google.longrunning.Operations.DeleteOperation
  • google.longrunning.Operations.ListOperations
  • google.longrunning.Operations.WaitOperation