Este documento explica como usar o Cloud Monitoring para acompanhar a integridade do serviço do Dataplex Universal Catalog, otimizar o desempenho e ter visibilidade da sua plataforma de dados. O monitoramento proativo ajuda a garantir a confiabilidade dos aplicativos de dados e a tomar decisões informadas sobre a alocação de recursos e o gerenciamento de custos.
Para entender os custos, consulte os preços do Monitoring.
Para mais informações sobre a retenção de dados de métricas, consulte Cotas e limites do Monitoring.
Casos de uso
É possível usar as métricas do Dataplex Universal Catalog no Cloud Monitoring para oferecer suporte aos seguintes casos de uso:
- Garantir a confiabilidade do pipeline de dados: monitore as taxas de sucesso e falha das tarefas do Dataplex Universal Catalog, como ingestão de dados ou jobs de qualidade de dados. Configure alertas para falhas ou durações incomuns para minimizar o tempo de inatividade de cargas de trabalho críticas.
- Otimizar o desempenho: acompanhe as durações dos jobs e as métricas de utilização de recursos para identificar e resolver gargalos de desempenho nos seus dados de tratamento, qualidade de dados e cargas de trabalho de descoberta.
- Gerenciar custos: monitore o consumo de recursos do Dataplex Universal Catalog para identificar oportunidades de otimização de custos, aplicar controles de orçamento e garantir a utilização eficiente de recursos.
- Manter a governança de dados: acompanhe as métricas relacionadas à descoberta de metadados e ao enriquecimento do catálogo para garantir que os recursos de dados sejam verificados e marcados de acordo com suas políticas de governança.
Como funciona
O Dataplex Universal Catalog está integrado ao Cloud Monitoring, que coleta métricas, eventos e metadados dos serviços do Dataplex Universal Catalog. Essas métricas fornecem insights sobre áreas como status de execução de jobs, uso da API e integridade de recursos. É possível analisar essas métricas usando ferramentas no Cloud Monitoring, como o Metrics Explorer, painéis personalizados e alertas. Essas ferramentas permitem visualizar o comportamento do serviço, identificar tendências de desempenho e criar políticas de alertas que notificam quando o desempenho se desvia dos limites definidos ou quando ocorrem falhas.
Acessar métricas de serviço no Monitoring
As métricas do recurso de serviço do Dataplex Universal Catalog são ativadas automaticamente nos serviços do Dataplex Universal Catalog. Para visualizar essas métricas, use o Monitoring.
É possível acessar o Monitoring no Google Cloud console ou usando a API Monitoring.
Se você não conseguir ver os gráficos de monitoramento ou criar alertas, talvez precise de mais permissões de monitoramento.
Console
No Google Cloud console do, acesse a página do Metrics explorer.
No menu Selecionar uma métrica, selecione um recurso
Cloud Dataplex.Selecione uma categoria de métrica e, em seguida, uma métrica na lista.
Para mostrar informações sobre uma métrica, mantenha o ponteiro sobre o nome dela.
Clique em Aplicar.
Opcional: selecione filtros, agrupe por rótulos de métricas, realize agregações e selecione opções de exibição de gráficos.
REST
Para capturar e listar métricas definidas por uma expressão filter,
use o método timeSeries.list
do Monitoring.
Para enviar uma solicitação de API e mostrar a resposta, na página da API, use o modelo Try this API.
Métricas de serviço do Dataplex Universal Catalog no Monitoring
As métricas de serviço do Dataplex Universal Catalog facilitam o monitoramento da integridade do serviço.
As strings "tipo de métrica" nesta tabela precisam ser prefixadas
com dataplex.googleapis.com/. Esse prefixo foi
omitido das entradas na tabela.
Ao consultar um rótulo, use o prefixo metric.labels.. por
exemplo, metric.labels.LABEL="VALUE".
| Tipo de métrica Etapa do lançamento (níveis da hierarquia de recursos) Nome de exibição |
|
|---|---|
| Classe, Tipo, Unidade Recursos monitorados |
Descrição Rótulos |
asset/active
BETA
(project)
Ativo |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Indica se o recurso está ativo.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/data_items
BETA
(project)
Itens de dados |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
A contagem de itens no recurso referenciado.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/data_size
BETA
(project)
Tamanho dos dados |
|
GAUGE, INT64, By
dataplex.googleapis.com/Asset |
O número de bytes armazenados no recurso referenciado.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/entities_pending_bigquery_iampolicy_updates
BETA
(projeto)
Entidades com atualizações de política do IAM do BigQuery pendentes |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Número de entidades associadas ao recurso com atualizações de política do IAM do BigQuery pendentes.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/entities_pending_bigquery_metadata_updates
BETA
(projeto)
Entidades com atualizações de metadados do BigQuery pendentes |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Número de entidades associadas ao recurso com atualizações de metadados do BigQuery pendentes.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/filesets
BETA
(project)
Conjuntos de arquivos |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
A contagem de entidades de conjunto de arquivos no recurso referenciado.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/requires_action
BETA
(project)
Requer ação |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
Indica se o recurso tem ações de administrador não resolvidas.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
asset/tables
BETA
(project)
Tabelas |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Asset |
A contagem de entidades de tabela no recurso referenciado.
resource_type:
o tipo do recurso referenciado.
zone_type:
o tipo da zona mãe.
|
lake/requires_action
BETA
(project)
Requer ação |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Lake |
Indica se o lake tem ações de administrador não resolvidas. |
zone/requires_action
BETA
(project)
Requer ação |
|
GAUGE, INT64, 1
dataplex.googleapis.com/Zone |
Indica se a zona tem ações de administrador não resolvidas.
type:
o tipo da zona.
|
Tabela gerada em 27-03-2026 03:31:46 UTC.
Criar um painel personalizado do Monitoring
É possível criar um painel personalizado do Monitoring com gráficos de métricas do serviço Dataplex Universal Catalog selecionadas. Para mais informações
sobre como criar um painel, consulte
Criar e gerenciar painéis personalizados. Ao selecionar uma métrica para um widget no painel, selecione um recurso Cloud Dataplex e escolha uma métrica do Dataplex Universal Catalog.
Usar alertas do Monitoring
É possível criar um alerta do Monitoring para notificar você quando um serviço ou armazenamento de job do Dataplex Universal Catalog ultrapassar um limite especificado.
Criar um alerta
Para criar um alerta, siga as instruções em
Criar políticas de alertas de limite de métrica.
Ao selecionar uma série temporal a ser monitorada, selecione um recurso Cloud Dataplex e escolha uma métrica do Dataplex Universal Catalog.
Ver alertas
Quando um alerta é acionado por uma condição de limite de métrica, o Monitoring cria um incidente e um evento correspondente.
Para visualizar um incidente, siga esta etapa:
No Google Cloud console, acesse a página Alertas.
O Monitoring também envia uma notificação do incidente se tiver sido definido na política de alerta algum mecanismo de notificação, como notificações por e-mail ou por SMS.
Para mais informações sobre alertas, consulte Incidentes para alertas baseados em métricas.
A seguir
- Saiba mais sobre Cloud Monitoring.