监控 Connect 集群

本文档介绍了如何通过查看 Connect 集群及其连接器的指标和日志来监控 Connect 集群

查看 Connect 集群指标

如需查看 Connect 集群及其连接器的指标,请执行以下步骤。

  1. 前往 Managed Service for Apache Kafka > 连接集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击监控标签。监控标签页会显示以下指标的图表:

    • 工作器 CPU 使用率。Connect 集群工作器的 CPU 使用率。

    • 工作器内存用量。Connect 集群工作器的内存用量。

    • 连接器传入字节速率。每秒从来源读取的平均字节数。

    • 连接器传出字节速率。每秒写入或发送到接收器的平均字节数。

  4. 可选:如需在 Metrics Explorer 中查看其中一个指标,请在图表中选择更多图表选项,然后点击在 Metrics Explorer 中查看

工作器 CPU 和工作器内存有助于跟踪 Connect 集群中的总体资源利用率。创建新连接器会增加 CPU 和内存利用率。

此标签页上显示的连接器指标是集群中运行的所有连接器的汇总指标。您可以使用这些指标来监控每秒读取或发送的数据量。

在 Metrics Explorer 中查看其他指标

如需查看 Connect 集群的其他指标,请使用 Metrics Explorer,具体操作如下:

  1. 前往 Cloud Monitoring > Metrics Explorer 页面。

    转到 Metrics Explorer

  2. 点击选择指标

  3. 活跃资源部分中,从 Apache Kafka Connect ClusterApache Kafka Connect Connector 类别中选择一个或多个指标。

查看 Connect 集群日志

您可以在 Connect 集群页面中或使用 Logs Explorer 查看 Connect 集群及其连接器的日志。

查看集群日志

如需查看 Connect 集群的日志,请执行以下步骤:

  1. 前往 Managed Service for Apache Kafka > 连接集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击日志日志标签页会显示所选 Connect 集群的日志。这些日志会实时更新。

  4. 可选:如需查看历史日志,请使用日志浏览器。在日志标签页中,点击 在日志浏览器中查看。系统会打开日志浏览器,其中预填充了查询。

查看连接器日志

如需查看连接器的日志,请执行以下步骤:

  1. 前往 Managed Service for Apache Kafka > 连接集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击资源

  4. 点击连接器的名称。

  5. 点击日志日志标签页会显示连接器的日志。这些日志会实时更新。

    此视图会过滤包含连接器名称的日志条目。它可能不包含与连接器相关的所有日志。如需查看完整的日志集,请查看 Connect 集群日志

  6. 可选:如需查看历史日志,请使用日志浏览器。在日志标签页中,点击 在日志浏览器中查看。系统会打开日志浏览器,其中预填充了查询。

使用日志浏览器查看日志

日志浏览器中,您可以使用以下查询来查询 Connect 集群日志:

resource.type="managedkafka.googleapis.com/ConnectCluster"
resource.labels.cluster_id="CONNECT_CLUSTER_NAME"
resource.labels.location="LOCATION"

替换以下内容:

  • CONNECT_CLUSTER_NAME:Connect 集群的名称
  • LOCATION:Connect 集群的位置

Connect 集群日志包含集群发出的所有日志,包括连接器的日志条目。

如需详细了解如何在日志浏览器中编写查询,请参阅使用 Logging 查询语言构建和保存查询

后续步骤