In diesem Dokument wird beschrieben, wie Sie mit Cloud Monitoring den Dienststatus des Dataplex Universal Catalog verfolgen, die Leistung optimieren und Einblick in Ihre Datenplattform erhalten. Durch proaktives Monitoring können Sie die Zuverlässigkeit von Datenanwendungen sicherstellen und fundierte Entscheidungen zur Ressourcenzuweisung und Kostenverwaltung treffen.
Informationen zu den Kosten finden Sie unter Monitoring-Preise.
Weitere Informationen zur Aufbewahrung von Messwertdaten finden Sie unter Kontingente und Limits für Monitoring.
Anwendungsfälle
Sie können Dataplex Universal Catalog-Messwerte in Cloud Monitoring verwenden, um die folgenden Anwendungsfälle zu unterstützen:
- Zuverlässigkeit von Datenpipelines sicherstellen: Überwachen Sie die Erfolgs- und Fehlerraten von Dataplex Universal Catalog-Aufgaben wie Datenerfassung oder Datenqualitätsjobs. Konfigurieren Sie Benachrichtigungen für Fehler oder ungewöhnliche Laufzeiten, um Ausfallzeiten für kritische Arbeitslasten zu minimieren.
- Leistung optimieren: Messwerte für die Jobdauer und die Ressourcennutzung im Blick behalten, um Leistungsengpässe in Ihren Arbeitslasten für die Datenverarbeitung, Datenqualität und Datenermittlung zu erkennen und zu beheben.
- Kosten verwalten: Überwachen Sie den Ressourcenverbrauch von Dataplex Universal Catalog, um Möglichkeiten zur Kostenoptimierung zu ermitteln, Budgetkontrollen zu erzwingen und eine effiziente Ressourcennutzung zu gewährleisten.
- Data Governance aufrechterhalten: Messwerte im Zusammenhang mit der Metadatenerkennung und der Kataloganreicherung im Blick behalten, um sicherzustellen, dass Datenassets gemäß Ihren Governance-Richtlinien gescannt und getaggt werden.
Funktionsweise
Dataplex Universal Catalog ist in Cloud Monitoring eingebunden. Cloud Monitoring erfasst Messwerte, Ereignisse und Metadaten aus Dataplex Universal Catalog-Diensten. Diese Messwerte geben Aufschluss über Bereiche wie den Jobausführungsstatus, die API-Nutzung und den Ressourcenstatus. Sie können diese Messwerte mit Tools in Cloud Monitoring analysieren, z. B. mit dem Metrics Explorer, benutzerdefinierten Dashboards und Benachrichtigungen. Mit diesen Tools können Sie das Verhalten Ihres Dienstes visualisieren, Leistungstrends erkennen und Benachrichtigungsrichtlinien erstellen, die Sie benachrichtigen, wenn die Leistung von den definierten Schwellenwerten abweicht oder Fehler auftreten.
Auf Dienstmesswerte in Monitoring zugreifen
Messwerte zu Dataplex Universal Catalog-Dienstressourcen werden automatisch für Dataplex Universal Catalog-Dienste aktiviert. Verwenden Sie Monitoring, um sich diese Messwerte anzusehen.
Sie können über die Google Cloud -Konsole oder die Monitoring API auf Monitoring zugreifen.
Wenn Sie die Monitoring-Diagramme nicht sehen oder keine Benachrichtigungen erstellen können, benötigen Sie möglicherweise zusätzliche Monitoring-Berechtigungen.
Console
Wechseln Sie in der Google Cloud Console zur Seite Metrics Explorer.
Wählen Sie im Menü Messwert auswählen eine
Cloud Dataplex-Ressource aus.Wählen Sie eine Messwertkategorie und dann einen Messwert aus der Liste aus.
Wenn Sie Informationen zu einem Messwert aufrufen möchten, bewegen Sie den Mauszeiger auf den Messwertnamen.
Klicken Sie auf Übernehmen.
Optional: Wählen Sie Filter aus, gruppieren Sie nach Messwertlabels, führen Sie Aggregationen aus und wählen Sie Optionen für die Diagrammanzeige aus.
REST
Mit der Monitoring-Methode timeSeries.list können Sie Messwerte erfassen und auflisten, die durch einen filter-Ausdruck definiert werden.
Wenn Sie eine API-Anfrage senden und die Antwort aufrufen möchten, verwenden Sie auf der API-Seite die Vorlage API testen.
Dienstmesswerte für Dataplex Universal Catalog in Monitoring
Mit den Dienstmesswerten von Dataplex Universal Catalog lässt sich der Dienststatus überwachen.
Den Strings vom Typ "metric type" in dieser Tabelle muss dataplex.googleapis.com/ vorangestellt werden. Dieses Präfix wurde in den Einträgen der Tabelle weggelassen.
Verwenden Sie beim Abfragen eines Labels das Präfix metric.labels.. Beispiel: metric.labels.LABEL="VALUE".
| Messwerttyp Startphase (Ebenen der Ressourcenhierarchie) Anzeigename |
|
|---|---|
| Art, Typ, Einheit Überwachte Ressourcen |
Beschreibung Labels |
asset/active
BETA
(Projekt)
Aktiv |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Gibt an, ob das Asset aktiv ist.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/data_items
BETA
(Projekt)
Datenelemente |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Die Anzahl der Elemente in der referenzierten Ressource.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/data_size
BETA
(Projekt)
Datengröße |
|
GAUGE, INT64, By
dataplex.googleapis.com/Asset |
Die Anzahl der gespeicherten Byte in der referenzierten Ressource.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/entities_pending_bigquery_iampolicy_updates
BETA
(project)
Entitäten mit ausstehenden BigQuery-IAM-Richtlinienaktualisierungen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Anzahl der Entitäten, die dem Asset zugeordnet sind und für die BigQuery-IAM-Richtlinienaktualisierungen ausstehen.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/entities_pending_bigquery_metadata_updates
BETA
(project)
Entitäten mit ausstehenden BigQuery-Metadatenaktualisierungen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Anzahl der Entitäten, die mit dem Asset verknüpft sind und für die BigQuery-Metadatenaktualisierungen ausstehen.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/filesets
BETA
(Projekt)
Filesets |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Die Anzahl der Fileset-Entitäten in der referenzierten Ressource.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/requires_action
BETA
(Projekt)
Erfordert Maßnahmen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Ob für das Asset noch nicht abgeschlossene Administratoraktionen vorliegen.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
asset/tables
BETA
(Projekt)
Tabellen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Die Anzahl der Tabellenentitäten in der referenzierten Ressource.
resource_type:
Der Typ der referenzierten Ressource.
zone_type:
Der Typ der übergeordneten Zone.
|
lake/requires_action
BETA
(Projekt)
Erfordert Maßnahmen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Lake |
Ob für den Lake noch nicht abgeschlossene Administratoraktionen vorhanden sind. |
zone/requires_action
BETA
(Projekt)
Erfordert Maßnahmen |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Zone |
Ob für die Zone noch ausstehende Administratoraktionen vorhanden sind.
type:
Der Typ der Zone.
|
Die Tabelle wurde am 20.03.2026 um 22:10:00 Uhr (UTC) erstellt.
Benutzerdefiniertes Monitoring-Dashboard erstellen
Sie können ein benutzerdefiniertes Monitoring-Dashboard erstellen, das Diagramme ausgewählter Dataplex Universal Catalog-Dienstmesswerte anzeigt. Weitere Informationen zum Erstellen eines Dashboards finden Sie unter Benutzerdefinierte Dashboards erstellen und verwalten. Wenn Sie einen Messwert für ein Widget in Ihrem Dashboard auswählen, wählen Sie eine Cloud Dataplex-Ressource und dann einen Dataplex Universal Catalog-Messwert aus.
Monitoring-Benachrichtigungen verwenden
Sie können eine Monitoring-Benachrichtigung erstellen, um informiert zu werden, wenn ein Dataplex Universal Catalog-Dienst oder Jobmesswert einen bestimmten Grenzwert überschreitet.
Benachrichtigung erstellen
Folgen Sie zum Erstellen einer Benachrichtigung der Anleitung unter Benachrichtigungsrichtlinien mit Messwertschwellen erstellen.
Wenn Sie eine Zeitreihe auswählen, die überwacht werden soll, wählen Sie eine Cloud Dataplex-Ressource und dann einen Dataplex Universal Catalog-Messwert aus.
Benachrichtigungen ansehen
Wenn eine Benachrichtigung durch eine Messwertschwellenbedingung ausgelöst wird, erstellt Monitoring einen Vorfall sowie ein entsprechendes Ereignis.
So rufen Sie einen Vorfall auf:
Rufen Sie in der Google Cloud -Console- die Seite Benachrichtigungen auf.
Wenn in der Benachrichtigungsrichtlinie eine Benachrichtigungsmethode wie E-Mail oder SMS definiert wurde, wird von Monitoring außerdem eine Benachrichtigung zu dem Vorfall gesendet.
Weitere Informationen zu Benachrichtigungen finden Sie unter Vorfälle für messwertbasierte Benachrichtigungen.