FAQ Knowledge Catalog

Dokumen ini menjawab pertanyaan umum (FAQ) tentang Google Cloud Knowledge Catalog (sebelumnya disebut Dataplex Universal Catalog).

Untuk mengetahui informasi selengkapnya tentang Knowledge Catalog, lihat Ringkasan Knowledge Catalog.

Konsep umum

Pelajari pertanyaan umum (FAQ) tentang fitur Knowledge Catalog.

Apa itu Knowledge Catalog?

Knowledge Catalog adalah solusi tata kelola cerdas untuk aset data dan AI di Google Cloud. Dataplex menyediakan inventaris terpusat tempat Anda dapat menemukan, mengelola, dan mengatur data di berbagai Google Cloud sumber data seperti BigQuery, Cloud Storage, Pub/Sub, dan Spanner.

Knowledge Catalog menggunakan AI untuk mengotomatiskan penemuan data, pengayaan metadata, dan kualitas data. Melalui katalog datanya yang diatur, Knowledge Catalog memberikan grounding penting yang dibutuhkan agen AI untuk menghasilkan konten berkualitas tinggi.

Untuk apa Knowledge Catalog digunakan?

Knowledge Catalog memecahkan masalah "cold start data"—waktu yang terbuang untuk mencoba menemukan, memahami, dan memercayai data sebelum Anda benar-benar dapat menggunakannya. Penggunaan utamanya mencakup:

  • Penemuan data yang dipercepat: Daripada menavigasi silo organisasi yang kompleks untuk menemukan data, Anda dapat menggunakan penelusuran natural language (misalnya, "Tunjukkan data churn pelanggan terbaru") untuk menemukan aset di seluruh resourceGoogle Cloud secara instan, yang meningkatkan produktivitas bagi konsumen data.

  • Merujuk agen AI: Berfungsi sebagai "sumber tepercaya" untuk AI generatif atau ADK. Dengan menautkan data fisik ke definisi bisnis, Dataplex memastikan bahwa agen AI (seperti yang dibangun di Vertex AI) menggunakan data berkualitas tinggi, yang secara signifikan mengurangi halusinasi AI dan meningkatkan kepercayaan pada insight yang dihasilkan AI.

  • Tata kelola data otomatis: Alat ini otomatis memindai data Anda untuk mengidentifikasi informasi sensitif (yaitu, PII), melacak asal data (silsilah), dan memantau akurasinya (kualitas data otomatis). Kemampuan ini membantu meningkatkan kepercayaan, keamanan, dan kepatuhan data dengan lebih sedikit upaya manual.

  • Menemukan "dark data": BigQuery dapat memindai file tidak terstruktur (misalnya, PDF atau gambar di Cloud Storage), mengekstrak informasi di dalamnya, serta membuatnya dapat ditelusuri dan dikueri di BigQuery, sehingga membantu Anda mendapatkan insight dari data yang sebelumnya tidak dapat diakses.

Untuk mulai menggunakan skenario ini, lihat Kasus penggunaan Knowledge Catalog.

Jenis metadata apa yang disimpan Knowledge Catalog?

Knowledge Catalog menyimpan tiga jenis metadata:

  • Metadata teknis: Skema, nama tabel, dan properti sistem yang dikumpulkan secara otomatis.

  • Metadata bisnis: Konteks yang ditentukan pengguna seperti deskripsi bisnis, istilah glosarium, dan kepemilikan.

  • Metadata runtime: Informasi tentang silsilah data, skor kualitas data, dan statistik pembuatan profil data.

Penagihan insight data

Pelajari pertanyaan umum (FAQ) tentang penagihan berbasis token, pengukuran penggunaan, dan kontrol administratif untuk fitur insight data di Knowledge Catalog.

Kapan saya akan mulai ditagih untuk penggunaan insight data?

Penagihan aktif untuk insight data dimulai pada 27 Oktober 2026.

Bagaimana cara penagihan penggunaan insight data?

Penggunaan diukur dalam token data. Token data mewakili unit dasar teks dan metadata yang diproses oleh model Gemini. Token ini dibagi menjadi dua kategori:

  • Input tokens: Konteks, petunjuk, dan histori yang dikirim ke model.
  • Token output: Deskripsi, hubungan, dan kueri bahasa alami yang dihasilkan dan ditampilkan oleh model.

Untuk mengetahui informasi selengkapnya, lihat Harga Agen Data Cloud.

Apakah akun layanan menerima kuota gratis untuk insight data?

Tidak. Akun layanan tidak menerima kuota gratis per pengguna. Namun, penggunaannya diukur dengan cara yang sama seperti pengguna standar.

Bagaimana cara mencegah penagihan otomatis untuk insight data?

Agar tidak dikenai biaya, verifikasi pemindaian yang sedang berlangsung dan berhenti memicu pemindaian baru. Administrator juga dapat menonaktifkan kemampuan insight data dengan menonaktifkan Dataplex API di project masing-masing.

Bagaimana cara mengetahui jumlah tagihan yang akan saya terima untuk insight data?

Google Cloud menyediakan pengukuran untuk token data. Pengukuran ini memungkinkan administrator dan pemilik agen memantau konsumsi token mereka. Untuk melacak konsumsi token untuk tugas pemindaian insight data dan membuat dasbor kustom di Cloud Monitoring, lihat Memantau penggunaan token insight data.

Bagaimana cara mengontrol biaya dan menetapkan batas token untuk insight data?

Untuk mengelola biaya dan menetapkan batas penggunaan token insight data, lihat Kuota dan batas untuk insight data.

Apa yang terjadi jika batas kuota insight data tercapai?

Knowledge Catalog memeriksa kuota token input dan output sebelum memulai pemindaian dan mengurangi token yang digunakan setelah pemindaian selesai.

Apa yang terjadi pada pemindaian yang sedang berlangsung saat batas terlampaui?

Knowledge Catalog hanya memeriksa kuota di awal pemindaian, bukan di tengah pemindaian. Jika pemindaian dimulai saat kuota masih tersedia dan penggunaan tokennya membuat project melebihi batas harian, pemindaian tersebut akan selesai secara normal dan memublikasikan insight yang dihasilkan. Setelah rekonsiliasi penagihan pasca-pemindaian selesai, Knowledge Catalog akan menandai bucket kuota harian sebagai habis (100%) selama sisa hari tersebut.

Apa yang terjadi pada pemindaian berikutnya yang dipicu setelah batas tercapai?

Setelah kuota token harian input atau output habis, Knowledge Catalog akan segera memblokir pemindaian insight on-demand atau terjadwal yang baru sebelum eksekusi. Pemindaian yang ditolak tidak dikenai biaya token.

Apa yang saya lihat di konsol Google Cloud ?

Jika pemindaian gagal karena kuota token terlampaui, BigQuery Studio dan Knowledge Catalog di konsol Google Cloud akan menampilkan perilaku berikut:

  • Pada tabel atau set data dengan insight yang ada: pembuatan ulang gagal dengan banner error inline berikut:

    Knowledge Catalog Insights token quota limit exceeded for this project.

    Semua deskripsi dan saran kueri SQL yang dibuat sebelumnya tetap terlihat dan dapat digunakan.

  • Pada tabel atau set data baru tanpa insight sebelumnya: pembuatan gagal dan menampilkan banner error kuota terlampaui dalam status kosong. Tombol Generate insights tetap tersedia untuk dicoba lagi.

Bagaimana cara melanjutkan pembuatan insight data?

Untuk melanjutkan pembuatan analisis data, lakukan salah satu tindakan berikut:

  • Tunggu reset harian: penghitung token harian otomatis direset ke 0 pada tengah malam Waktu Pasifik (00.00 PT).
  • Meningkatkan batas kuota: administrator project dapat menaikkan batas harian (atau meresetnya ke tidak terbatas) di halaman Quotas & System Limits di konsolGoogle Cloud untuk segera melanjutkan pembuatan insight.

Pemantauan penagihan dan biaya

Pelajari pertanyaan umum (FAQ) tentang pemantauan dan atribusi biaya komputasi di Knowledge Catalog.

Bagaimana cara memantau dan mengatribusikan biaya DCU Knowledge Catalog untuk kualitas data, pembuatan profil data, dan silsilah data?

Komputasi DataScan Knowledge Catalog (kualitas data otomatis dan pembuatan profil data) dan Unit Komputasi Data (DCU) silsilah data berjalan pada komputasi serverless di infrastruktur yang dikelola Google dan tidak memublikasikan metrik deret waktu di bagian dataplex.googleapis.com/* ke Cloud Monitoring.

Untuk memantau, memberi tahu, dan mengatribusikan biaya DCU Knowledge Catalog di seluruh project dan pemindaian, ekspor data Penagihan Cloud Anda ke BigQuery dan buat kueri label sistem yang dilampirkan ke data penagihan Knowledge Catalog:

  • Untuk pemindaian kualitas data dan pemindaian profil data, gunakan label goog-dataplex-datascan-* (seperti goog-dataplex-datascan-id, goog-dataplex-datascan-data-source-project, dan goog-dataplex-datascan-data-source-bigquery-table).
  • Untuk pemrosesan Silsilah Data, gunakan label goog-dataplex-workload-type dengan nilai LINEAGE.

Untuk mengetahui definisi label mendetail dan contoh kueri SQL BigQuery, lihat Memantau dan mengatribusikan biaya DCU Knowledge Catalog dengan ekspor Penagihan Cloud.