Melihat hubungan data di Knowledge Catalog

Hubungan data di Knowledge Catalog (sebelumnya Dataplex Universal Catalog) memungkinkan Anda menemukan tabel dan tampilan BigQuery terkait serta memeriksa cara keduanya terhubung. Kemudian, Anda dapat menjelajahi set data tertaut atau memberikan konteks struktural kepada agen AI untuk pembuatan kueri yang lebih akurat.

Sebelum memulai

Sebelum melihat hubungan antara aset data, pastikan Anda diberi peran yang diperlukan.

Peran yang diperlukan

Untuk melihat hubungan antara aset data di Knowledge Catalog, Anda tidak memerlukan peran IAM khusus untuk Knowledge Catalog. Knowledge Catalog menggunakan izin yang ada pada sistem sumber tempat aset berada, seperti BigQuery, untuk menentukan kemampuan Anda melihat hubungan. Misalnya, untuk melihat hubungan yang melibatkan tabel BigQuery, Anda memerlukan izin bigquery.tables.get.

Jika Anda tidak memiliki izin untuk melihat aset di sistem sumbernya, grafik hubungan Knowledge Catalog akan menyembunyikan hubungan apa pun yang melibatkan aset tersebut. Hal ini memastikan bahwa visibilitas hubungan mematuhi batas keamanan dan izin yang ditetapkan dalam sistem sumber.

Tentang hubungan data

Hubungan data menggambarkan cara aset data terhubung. Misalnya, jika Anda menemukan tabel dengan data pelanggan, hubungannya dapat mengungkapkan tabel terkait yang mencantumkan pesanan atau tiket dukungan. Selain itu, hubungan berfungsi sebagai panduan struktural, yang memberikan konteks penting untuk Model Bahasa Besar. Hasilnya, AI menghasilkan respons yang lebih tepat, dengan merumuskan kueri yang akurat untuk mengambil informasi tertentu.

Knowledge Catalog secara otomatis menemukan dan menyimpan potensi link dan hubungan umum antara aset data, sehingga membantu Anda memahami sifat setiap koneksi. Data hubungan berasal dari berbagai sumber, seperti berikut:

  • Log kueri historis Knowledge Catalog yang terus menganalisis histori kueri untuk mendeteksi potensi pola JOIN di antara tabel.
  • Insight data menyarankan hubungan data sesuai permintaan dengan menganalisis atribut skema dan tumpang-tindih data menggunakan model bahasa besar.

Aset data yang didukung

Anda dapat melihat hubungan data untuk tabel dan tampilan BigQuery.

Melihat hubungan data

Untuk melihat hubungan data untuk tabel dan tampilan BigQuery, gunakan konsolGoogle Cloud atau Dataplex API.

console

Untuk melihat hubungan data untuk tabel di BigQuery, lakukan hal berikut:

  1. Di konsol Google Cloud , buka halaman Search Knowledge Catalog.

    Buka Penelusuran

  2. Telusuri tabel BigQuery yang ingin Anda lihat hubungannya.

  3. Di hasil penelusuran, klik nama tabel untuk membuka halaman entrinya.

  4. Buka tab Relationships untuk melihat informasi berikut tentang setiap hubungan data:

    • Target: Nama aset data yang terhubung.
    • Hubungan: Kolom tertentu yang digunakan untuk menautkan aset.
    • Jenis: Sifat link. Misalnya, penggabungan yang sering dan hubungan yang ditemukan oleh insight data akan muncul sebagai JOIN.

    • Origin: Asal hubungan.

      • Query history adalah asal untuk penggabungan yang sering.
      • Data insights adalah asal hubungan yang ditemukan oleh insight data.

    • Tindakan: Contoh kueri yang dapat Anda gunakan untuk menemukan link di antara aset.

REST

Hubungan yang ditemukan disimpan di Knowledge Catalog sebagai EntryLinks yang membangun hubungan antara dua aset data (entri) di Knowledge Catalog. Detail tentang hubungan, seperti kolom yang digabungkan dan sumber hubungan, disimpan sebagai aspek EntryLinks.

Untuk melihat hubungan data, gunakan metode berikut:

  • LookupEntryLinks mengambil semua EntryLinks yang mereferensikan entri data tertentu sebagai sumber atau target untuk menampilkan kumpulan lengkap hubungan yang terkait dengan entri tertentu.

  • LookupContext menyediakan satu endpoint untuk melakukan grounding pada agen AI dengan metadata kontekstual. Tindakan ini akan menampilkan paket metadata yang ringkas dan telah diformat sebelumnya, termasuk aset data terkait.

Lokasi

Anda dapat menggunakan hubungan data di semua lokasi BigQuery.

Batasan

  • Knowledge Catalog menganalisis sampel histori kueri untuk mengidentifikasi hubungan, yang berarti beberapa kueri mungkin tidak mengarah pada penemuan link.
  • Penemuan hubungan mungkin memerlukan waktu hingga 72 jam setelah kueri dijalankan.

Langkah berikutnya