Rastrear informações de linhagem do sistema externo

A linhagem de dados no Knowledge Catalog (antigo Dataplex Universal Catalog) permite registrar manualmente informações de linhagem para sistemas que não são compatíveis com o rastreamento automatizado de linhagem de dados, como bancos de dados externos ou locais. É possível usar a API Data Lineage para registrar processos, execuções e eventos personalizados que capturam o movimento de dados e mantêm uma visualização completa e de ponta a ponta dos dados.

Registrar eventos personalizados

Para rastrear a movimentação de dados ao integrar com bancos de dados externos ou locais, crie os seguintes recursos em ordem:

  1. Crie um processo usando o método processes.create.
  2. Crie uma execução usando o método processes.runs.create.
  3. Crie um evento de linhagem usando o método processes.runs.lineageEvents.create.