Dokumen ini menjelaskan cara menggunakan Cloud Monitoring untuk melacak kondisi layanan Dataplex Universal Catalog, mengoptimalkan performa, dan mendapatkan visibilitas ke dalam platform data Anda. Pemantauan proaktif membantu Anda memastikan keandalan aplikasi data dan membuat keputusan yang tepat tentang alokasi resource dan pengelolaan biaya.
Untuk memahami biaya, lihat Harga Monitoring.
Untuk mengetahui informasi selengkapnya tentang retensi data metrik, lihat Kuota dan batas Monitoring.
Kasus penggunaan
Anda dapat menggunakan metrik Dataplex Universal Catalog di Cloud Monitoring untuk mendukung kasus penggunaan berikut:
- Memastikan keandalan pipeline data: Memantau tingkat keberhasilan dan kegagalan tugas Dataplex Universal Catalog, seperti tugas penyerapan data atau kualitas data. Konfigurasi pemberitahuan untuk kegagalan atau durasi yang tidak biasa guna meminimalkan waktu henti untuk workload penting.
- Mengoptimalkan performa: Lacak durasi tugas dan metrik pemanfaatan resource untuk mengidentifikasi dan mengatasi bottleneck performa dalam pemrosesan data, kualitas data, dan beban kerja penemuan data.
- Mengelola biaya: Pantau konsumsi resource Dataplex Universal Catalog untuk mengidentifikasi peluang pengoptimalan biaya, menerapkan kontrol anggaran, dan memastikan pemanfaatan resource yang efisien.
- Mempertahankan tata kelola data: Lacak metrik yang terkait dengan penemuan metadata dan pengayaan katalog untuk memastikan aset data dipindai dan diberi tag sesuai dengan kebijakan tata kelola Anda.
Cara kerjanya
Dataplex Universal Catalog terintegrasi dengan Cloud Monitoring, yang mengumpulkan metrik, peristiwa, dan metadata dari layanan Dataplex Universal Catalog. Metrik ini memberikan insight ke dalam area seperti status eksekusi tugas, penggunaan API, dan kondisi resource. Anda dapat menganalisis metrik ini menggunakan alat di Cloud Monitoring, seperti Metrics Explorer, dasbor kustom, dan pemberitahuan. Alat ini memungkinkan Anda memvisualisasikan perilaku layanan, mengidentifikasi tren performa, dan membuat kebijakan pemberitahuan yang akan memberi tahu Anda saat performa menyimpang dari nilai minimum yang ditentukan atau saat terjadi kegagalan.
Mengakses metrik layanan di Monitoring
Metrik resource layanan Dataplex Universal Catalog diaktifkan secara otomatis di layanan Dataplex Universal Catalog. Untuk melihat metrik ini, gunakan Monitoring.
Anda dapat mengakses Monitoring dari Google Cloud console atau menggunakan Monitoring API.
Jika tidak dapat melihat grafik pemantauan atau membuat pemberitahuan, Anda mungkin memerlukan izin Pemantauan tambahan.
Konsol
Di konsol Google Cloud , buka halaman Metrics explorer.
Di menu Pilih metrik, pilih resource
Cloud Dataplex.Pilih kategori metrik, lalu pilih metrik dari daftar.
Untuk menampilkan informasi tentang metrik, arahkan kursor ke nama metrik.
Klik Terapkan.
Opsional: Pilih filter, kelompokkan menurut label metrik, lakukan penggabungan, dan pilih opsi tampilan diagram.
REST
Untuk merekam dan mencantumkan metrik yang ditentukan oleh ekspresi filter,
Gunakan metode timeSeries.list
Monitoring.
Untuk mengirim permintaan API dan menampilkan respons, di halaman API, gunakan template Try this API.
Metrik layanan Dataplex Universal Catalog di Monitoring
Metrik layanan Dataplex Universal Catalog memfasilitasi pemantauan kondisi layanan.
String "jenis metrik" dalam tabel ini harus diawali
dengan dataplex.googleapis.com/. Awalan tersebut telah dihilangkan dari entri dalam tabel.
Saat membuat kueri label, gunakan awalan metric.labels.; misalnya, metric.labels.LABEL="VALUE".
| Jenis metrik Tahap peluncuran (Tingkat hierarki resource) Nama tampilan |
|
|---|---|
| Jenis, Tipe, Unit Resource yang dimonitor |
Deskripsi Label |
asset/active
BETA
(project)
Aktif |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Apakah aset aktif.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/data_items
BETA
(project)
Item data |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Jumlah item dalam resource yang dirujuk.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/data_size
BETA
(project)
Ukuran data |
|
GAUGE, INT64, By
dataplex.googleapis.com/Asset |
Jumlah byte yang disimpan dalam resource yang dirujuk.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/entities_pending_bigquery_iampolicy_updates
BETA
(project)
Entitas dengan pembaruan kebijakan IAM BigQuery yang tertunda |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Jumlah Entitas yang terkait dengan Aset dengan pembaruan kebijakan IAM BigQuery yang tertunda.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/entities_pending_bigquery_metadata_updates
BETA
(project)
Entitas dengan pembaruan metadata BigQuery yang tertunda |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Jumlah Entitas yang terkait dengan Aset dengan pembaruan metadata BigQuery yang tertunda.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/filesets
BETA
(project)
Kumpulan file |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Jumlah entitas kumpulan file dalam resource yang dirujuk.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/requires_action
BETA
(project)
Tindakan diperlukan |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Apakah aset memiliki tindakan admin yang belum terselesaikan.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
asset/tables
BETA
(project)
Tabel |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Jumlah entitas tabel dalam resource yang dirujuk.
resource_type:
Jenis resource yang dirujuk.
zone_type:
Jenis zona induk.
|
lake/requires_action
BETA
(project)
Tindakan diperlukan |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Lake |
Apakah danau memiliki tindakan admin yang belum terselesaikan. |
zone/requires_action
BETA
(project)
Tindakan diperlukan |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Zone |
Apakah zona memiliki tindakan admin yang belum terselesaikan.
type:
Jenis zona.
|
Tabel dihasilkan pada 2026-03-27 03:31:46 UTC.
Membangun dasbor Monitoring kustom
Anda dapat membuat dasbor Monitoring kustom yang menampilkan
diagram metrik layanan Dataplex Universal Catalog yang dipilih. Untuk mengetahui informasi selengkapnya
tentang cara membuat dasbor, lihat
Membuat dan mengelola dasbor kustom. Saat Anda
memilih metrik untuk widget di dasbor, pilih Cloud Dataplex
resource, lalu pilih metrik Dataplex Universal Catalog.
Menggunakan pemberitahuan Monitoring
Anda dapat membuat pemberitahuan Monitoring yang memberi tahu Anda saat metrik layanan atau tugas Dataplex Universal Catalog melampaui batas yang ditentukan.
Membuat pemberitahuan
Untuk membuat pemberitahuan, ikuti petunjuk di
Membuat kebijakan pemberitahuan batas metrik.
Saat Anda memilih deret waktu yang akan dipantau, pilih Cloud Dataplex
resource, lalu pilih metrik Dataplex Universal Catalog.
Lihat pemberitahuan
Saat pemberitahuan dipicu oleh kondisi nilai minimum metrik, Monitoring akan membuat insiden dan peristiwa yang sesuai.
Untuk melihat insiden, ikuti langkah berikut:
Di konsol Google Cloud , buka halaman Alerting.
Jika Anda menentukan mekanisme notifikasi dalam kebijakan pemberitahuan, seperti notifikasi email atau SMS, Monitoring juga akan mengirimkan notifikasi insiden.
Untuk mengetahui informasi selengkapnya tentang pemberitahuan, lihat Insiden untuk pemberitahuan berbasis metrik.
Langkah berikutnya
- Pelajari Cloud Monitoring lebih lanjut.