Knowledge Catalog (sebelumnya disebut Dataplex Universal Catalog) memungkinkan Anda mengelola tugas konektor yang menjalankan impor metadata terjadwal dan on-demand untuk menjaga katalog Anda tetap sinkron dengan sumber data eksternal. Anda dapat melihat konfigurasi tugas, histori operasi, dan log, memperbarui setelan impor, menonaktifkan atau mengaktifkan operasi terjadwal, memicu operasi tugas secara manual, dan menghapus tugas.
Untuk mengetahui informasi selengkapnya tentang cara kerja konektor, lihat Tentang konektor metadata.
Sebelum memulai
Untuk mengelola tugas konektor, Anda memerlukan peran IAM yang sesuai. Lihat peran IAM untuk mengetahui detailnya.
- Untuk melihat tugas dan histori operasi:
- BigQuery User (
roles/bigquery.user) - Dataplex Viewer (
roles/dataplex.viewer)
- BigQuery User (
- Untuk mengedit, menghapus, atau memicu tugas secara manual:
- BigQuery Admin (
roles/bigquery.admin) - Dataplex Administrator (
roles/dataplex.admin) atau Dataplex Editor (roles/dataplex.editor)
- BigQuery Admin (
Anda harus mengaktifkan BigQuery Data Transfer Service.
Selain itu, Anda harus memberikan izin dataplex.entryGroups.import atau peran Dataplex Entry Group Importer (roles/dataplex.entryGroupImporter) kepada agen layanan BigQuery Data Transfer Service (service-PROJECT_NUMBER@gcp-sa-bigquerydatatransfer.iam.gserviceaccount.com). Peran ini dapat diberikan di level project atau di level grup entri.
Melihat tugas konektor
Di konsol Google Cloud , buka halaman Knowledge Catalog.
Di menu navigasi, di bagian Manage, klik Connectors. Halaman Connectors mencantumkan semua tugas impor metadata dalam project Anda.
Untuk melihat detail, histori operasi, atau konfigurasi tugas tertentu, klik nama tampilannya dalam daftar.
Melihat histori dan log operasi tugas
Untuk tugas konektor apa pun, Anda dapat melihat histori operasinya, termasuk operasi yang berhasil dan gagal. Operasi tugas yang sudah lebih dari 90 hari akan otomatis dihapus.
- Di halaman Connectors, klik nama tampilan tugas yang ingin Anda lihat.
- Klik tab Run history. Tab ini menampilkan operasi tugas terbaru.
- Untuk melihat log untuk operasi tertentu, temukan operasi dalam daftar, lalu klik View details.
Logging dan pemantauan
Konektor metadata Knowledge Catalog mengekspor log dan metrik ke Cloud Monitoring dan Cloud Logging yang memberikan kemampuan observasi ke dalam konfigurasi impor Anda. Anda dapat menggunakan Monitoring untuk menyiapkan dasbor guna memantau konfigurasi impor metadata, mengevaluasi performa operasi, dan melihat pesan error untuk memecahkan masalah kegagalan operasi. Anda dapat menggunakan Logging untuk melihat log yang terkait dengan operasi atau konfigurasi.
Mengupdate tugas konektor
Anda dapat mengubah konfigurasi tugas yang ada, termasuk jadwalnya, grup entri tujuan, setelan notifikasi, dan objek sumber yang akan diimpor.
- Di halaman Connectors, klik nama tampilan tugas yang ingin Anda perbarui.
- Klik Edit.
- Ubah konfigurasi tugas sesuai kebutuhan.
- Klik Simpan.
Menonaktifkan atau mengaktifkan tugas konektor
Saat Anda menonaktifkan tugas, namanya akan diperbarui dengan status disabled, dan tidak ada
operasi tugas baru yang dijadwalkan. Setiap operasi yang sedang berjalan akan selesai.
Menonaktifkan tugas tidak akan menghapus metadata yang sudah diimpor ke Knowledge Catalog.
- Di halaman Connectors, temukan tugas yang ingin Anda nonaktifkan atau aktifkan.
- Klik Tindakan, lalu pilih Nonaktifkan atau Aktifkan.
Menghapus tugas konektor
Saat Anda menghapus tugas, tidak ada operasi baru yang dijadwalkan, dan operasi yang sedang berlangsung akan dihentikan. Menghapus tugas tidak akan menghapus metadata yang sudah diimpor ke Knowledge Catalog.
- Di halaman Connectors, temukan tugas yang ingin Anda hapus.
- Klik Actions, lalu pilih Delete.
- Untuk mengonfirmasi, ketik
delete, lalu klik Delete.
Memicu tugas secara manual
Anda dapat memulai operasi tugas di luar jadwal regulernya. Hal ini terkadang disebut pengisian ulang.
- Di halaman Connectors, klik nama tampilan tugas yang ingin Anda jalankan.
Klik Run transfer now, lalu pilih Run one time transfer.