Tentang konektor database

Dokumen ini menjelaskan cara menggunakan konektor Knowledge Catalog (sebelumnya Dataplex Universal Catalog) untuk mengimpor metadata dari sumber data eksternal pihak ketiga ke Knowledge Catalog.

Konektor Knowledge Catalog memanfaatkan BigQuery Data Transfer Service untuk menyediakan integrasi bawaan yang secara otomatis mengekstrak metadata dari sistem sumber dan memetakannya ke entri dalam grup entri Knowledge Catalog.

Konektor mengekstrak jenis metadata berikut:

  • Metadata teknis: Definisi database, skema, tabel, dan tampilan.
  • Metadata operasional: Stempel waktu pembuatan dan terakhir diperbarui untuk aset, seperti tabel, tampilan, dan rutin.
  • Metadata bisnis: Pemilik dan anotasi aset.

Setelah Anda mengonfigurasi konektor, Knowledge Catalog menjadwalkan proses impor metadata sesuai jadwal yang Anda tentukan, sehingga memastikan katalog tetap disinkronkan dengan sistem sumber.

Sumber data yang didukung

Anda dapat mengimpor metadata dari sumber berikut menggunakan konektor Knowledge Catalog:

  • Oracle
  • MySQL

Integrasi dengan partner tata kelola data

Anda dapat mengintegrasikan Knowledge Catalog dengan platform tata kelola dan katalog data perusahaan lainnya. Integrasi ini membantu memastikan bahwa metadata dapat ditemukan dan konsisten di seluruh lanskap data organisasi Anda, sehingga Anda dapat memperkaya metadata di Knowledge Catalog atau melihat metadata Knowledge Catalog dalam alat pihak ketiga.

Partner berikut menyediakan integrasi untuk Knowledge Catalog:

Cara kerjanya

Konektor Knowledge Catalog menggunakan konfigurasi transfer yang dikelola oleh BigQuery Data Transfer Service untuk terhubung ke sumber data Anda, mengekstrak metadata, dan menyerapnya ke dalam grup entri Knowledge Catalog yang Anda tentukan.

Setiap kali impor metadata dijalankan, impor tersebut akan melakukan penimpaan penuh pada entri di grup entri tujuan yang dikelola oleh konfigurasi tersebut. Objek metadata yang tidak ada lagi di sumber akan dihapus dari grup entri, dan objek baru akan ditambahkan. Objek dalam grup entri yang tidak diimpor oleh konfigurasi konektor tidak terpengaruh.

Anda mengonfigurasi dan mengelola konfigurasi ini dari halaman Konektor di bagian Knowledge Catalog pada konsol Google Cloud .

Terminologi

Istilah berikut digunakan dalam dokumentasi ini:

  • Konfigurasi impor metadata: Setelan untuk tugas terjadwal atau on-demand yang menggunakan BigQuery Data Transfer Service untuk mengekstrak metadata dari sumber dan memuatnya ke Knowledge Catalog.
  • Jalankan: Satu instance eksekusi konfigurasi impor metadata.
  • Grup entri: Resource di Knowledge Catalog yang berisi entri metadata. Saat mengonfigurasi konektor, Anda menetapkan grup entri sebagai tujuan untuk metadata yang diimpor.
  • Entri: Resource dalam Knowledge Catalog yang merepresentasikan aset data, seperti tabel atau tampilan.

Harga

Tidak ada biaya tambahan dari Knowledge Catalog atau BigQuery Data Transfer Service untuk mengimpor metadata menggunakan konektor.

Biaya standar berlaku untuk penggunaan Knowledge Catalog lainnya (seperti penyimpanan metadata). Untuk mengetahui informasi selengkapnya, lihat harga Knowledge Catalog.

Batasan

  • Hanya metadata yang diimpor, bukan data pokok dari tabel atau tampilan sumber. Untuk mentransfer data pokok, Anda dapat menggunakan BigQuery Data Transfer Service.
  • Setiap operasi menjalankan penimpaan penuh entri yang dikelola konektor di grup entri tujuan. Pembaruan metadata inkremental tidak didukung.
  • Histori eksekusi dipertahankan selama 90 hari.

Langkah berikutnya