Informazioni sui connettori di database

Questo documento descrive come utilizzare i connettori di Knowledge Catalog (in precedenza Dataplex Universal Catalog) per importare i metadati da origini dati esterne di terze parti in Knowledge Catalog.

I connettori di Knowledge Catalog sfruttano BigQuery Data Transfer Service per fornire integrazioni predefinite che estraggono automaticamente i metadati dai sistemi di origine e li mappano alle voci all'interno di un gruppo di voci di Knowledge Catalog.

I connettori estraggono i seguenti tipi di metadati:

  • Metadati tecnici: definizioni di database, schema, tabella e visualizzazione.
  • Metadati operativi: timestamp di creazione e ultimo aggiornamento per asset, come tabelle, visualizzazioni e routine.
  • Metadati aziendali: proprietari e annotazioni degli asset.

Dopo aver configurato un connettore, Knowledge Catalog pianifica le esecuzioni di importazione dei metadati in base alla pianificazione specificata, assicurandosi che il catalogo rimanga sincronizzato con il sistema di origine.

Origini dati supportate

Puoi importare i metadati dalle seguenti origini utilizzando i connettori di Knowledge Catalog:

  • Oracle
  • MySQL

Integrazioni con i partner di governance dei dati

Puoi integrare Knowledge Catalog con altre piattaforme di catalogazione e governance dei dati aziendali. Queste integrazioni contribuiscono a garantire che i metadati siano rilevabili e coerenti nel panorama dei dati della tua organizzazione, consentendoti di arricchire i metadati in Knowledge Catalog o di visualizzare i metadati di Knowledge Catalog all'interno di strumenti di terze parti.

I seguenti partner forniscono integrazioni per Knowledge Catalog:

Come funziona

I connettori di Knowledge Catalog utilizzano le configurazioni di trasferimento gestite da BigQuery Data Transfer Service per connettersi all'origine dati, estrarre i metadati e importarli in un gruppo di voci di Knowledge Catalog specificato.

Ogni volta che viene eseguita un'importazione di metadati, viene eseguita una sovrascrittura completa delle voci nel gruppo di voci di destinazione gestito da quella configurazione. Gli oggetti di metadati non più presenti nell'origine vengono rimossi dal gruppo di voci e vengono aggiunti nuovi oggetti. Gli oggetti nel gruppo di voci che non sono stati importati dalla configurazione del connettore non sono interessati.

Puoi configurare e gestire queste configurazioni dalla pagina Connettori nella sezione Knowledge Catalog della Google Cloud console.

Terminologia

In questa documentazione vengono utilizzati i seguenti termini:

  • Configurazione di importazione dei metadati: le impostazioni per un'attività pianificata o on demand che utilizza BigQuery Data Transfer Service per estrarre i metadati da un'origine e caricarli in Knowledge Catalog.
  • Esecuzione: una singola istanza di esecuzione di una configurazione di importazione dei metadati.
  • Gruppo di voci: una risorsa in Knowledge Catalog che contiene voci di metadati. Quando configuri un connettore, devi designare un gruppo di voci come destinazione per i metadati importati.
  • Voce: una risorsa in Knowledge Catalog che rappresenta un asset di dati, ad esempio una tabella o una visualizzazione.

Prezzi

Non sono previsti costi aggiuntivi da Knowledge Catalog o BigQuery Data Transfer Service per l'importazione di metadati tramite i connettori.

Si applicano i costi standard per altri utilizzi di Knowledge Catalog (ad esempio l'archiviazione dei metadati). Per ulteriori informazioni, consulta i prezzi di Knowledge Catalog.

Limitazioni

  • Vengono importati solo i metadati, non i dati sottostanti delle tabelle o delle visualizzazioni di origine. Per trasferire i dati sottostanti, puoi utilizzare il BigQuery Data Transfer Service.
  • Ogni esecuzione esegue una sovrascrittura completa delle voci gestite dal connettore nel gruppo di voci di destinazione. Gli aggiornamenti incrementali dei metadati non sono supportati.
  • La cronologia delle esecuzioni viene conservata per 90 giorni.

Passaggi successivi