Informazioni sui connettori di database

Questo documento descrive come utilizzare i connettori di Knowledge Catalog (in precedenza Dataplex Universal Catalog) per importare i metadati da origini dati esterne di terze parti in Knowledge Catalog.

I connettori Knowledge Catalog sfruttano BigQuery Data Transfer Service per fornire integrazioni predefinite che estraggono automaticamente i metadati dai sistemi di origine e li mappano alle voci all'interno di un gruppo di voci Knowledge Catalog.

I connettori estraggono i seguenti tipi di metadati:

  • Metadati tecnici: definizioni di database, schema, tabella e visualizzazione.
  • Metadati operativi: timestamp di creazione e ultimo aggiornamento per gli asset, come tabelle, viste e routine.
  • Metadati aziendali: proprietari e annotazioni delle risorse.

Dopo aver configurato un connettore, Knowledge Catalog pianifica le esecuzioni di importazione dei metadati in base alla pianificazione specificata, assicurandosi che il catalogo rimanga sincronizzato con il sistema di origine.

Origini dati supportate

Puoi importare i metadati dalle seguenti origini utilizzando i connettori di Knowledge Catalog:

  • Oracle
  • MySQL

Integrazioni con i partner di governance dei dati

Puoi integrare Knowledge Catalog con altre piattaforme di catalogazione e governance dei dati aziendali. Queste integrazioni contribuiscono a garantire che i metadati siano rilevabili e coerenti nel panorama dei dati della tua organizzazione, consentendoti di arricchire i metadati in Knowledge Catalog o di visualizzare i metadati di Knowledge Catalog all'interno di strumenti di terze parti.

I seguenti partner forniscono integrazioni per Knowledge Catalog:

Come funziona

I connettori Knowledge Catalog utilizzano configurazioni di trasferimento gestite da BigQuery Data Transfer Service per connettersi all'origine dati, estrarre i metadati e importarli in un gruppo di voci di Knowledge Catalog specificato.

Ogni volta che viene eseguita un'importazione di metadati, viene eseguita una sovrascrittura completa delle voci nel gruppo di voci di destinazione gestito da quella configurazione. Gli oggetti di metadati non più presenti nell'origine vengono rimossi dal gruppo di voci e vengono aggiunti nuovi oggetti. Gli oggetti nel gruppo di voci che non sono stati importati dalla configurazione del connettore non sono interessati.

Puoi configurare e gestire queste configurazioni dalla pagina Connettori nella sezione Knowledge Catalog della console Google Cloud .

Terminologia

In questa documentazione vengono utilizzati i seguenti termini:

  • Configurazione dell'importazione dei metadati: le impostazioni per un'attività pianificata o on demand che utilizza BigQuery Data Transfer Service per estrarre i metadati da un'origine e caricarli in Knowledge Catalog.
  • Esecuzione: una singola istanza di esecuzione di una configurazione di importazione dei metadati.
  • Gruppo di voci: una risorsa in Knowledge Catalog che contiene voci di metadati. Quando configuri un connettore, designi un gruppo di voci come destinazione per i metadati importati.
  • Voce: una risorsa in Knowledge Catalog che rappresenta un asset di dati, come una tabella o una vista.

Prezzi

Non sono previsti costi aggiuntivi per Knowledge Catalog o BigQuery Data Transfer Service per l'importazione di metadati utilizzando i connettori.

Per l'altro utilizzo di Knowledge Catalog (ad esempio l'archiviazione dei metadati) vengono applicati i costi standard. Per ulteriori informazioni, consulta la sezione Prezzi di Knowledge Catalog.

Limitazioni

  • Vengono importati solo i metadati, non i dati sottostanti delle tabelle o delle viste di origine. Per trasferire i dati sottostanti, puoi utilizzare BigQuery Data Transfer Service.
  • Ogni esecuzione esegue una sovrascrittura completa delle voci gestite dal connettore nel gruppo di voci di destinazione. Gli aggiornamenti incrementali dei metadati non sono supportati.
  • La cronologia delle corse viene conservata per 90 giorni.

Passaggi successivi