监控 Connect 集群

本文档介绍了如何通过查看 Connect 集群及其连接器的指标和日志来监控该集群。

查看 Connect 集群指标

如需查看 Connect 集群及其连接器的指标,请执行以下步骤。

  1. 前往 Managed Service for Apache Kafka > Connect 集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击监控标签。监控标签页会显示以下指标的图表:

    • 工作器 CPU 使用率。Connect 集群工作器的 CPU 使用率。

    • 工作器内存用量。Connect 集群工作器的内存用量。

    • 连接器传入字节速率。每秒从来源读取的平均字节数。

    • 连接器传出字节速率。每秒写入或发送到接收器的平均字节数。

  4. 可选:如需在 Metrics Explorer 中查看其中一个指标,请在图表中选择 更多图表选项,然后点击在 Metrics Explorer 中查看。

工作器 CPU 和工作器内存有助于跟踪 Connect 集群中的总体资源利用率。创建新连接器会增加 CPU 和内存利用率。

此标签页上显示的连接器指标是集群中运行的所有连接器的汇总数据。使用这些指标可监控每秒读取或发送的数据量。

在 Metrics Explorer 中查看其他指标

如需查看 Connect 集群的其他指标,请使用 Metrics Explorer,具体操作如下:

  1. 前往 Cloud Monitoring > Metrics Explorer 页面。

    转到 Metrics Explorer

  2. 点击选择指标。

  3. 在活跃资源部分中,从 Apache Kafka Connect Cluster 和 Apache Kafka Connect Connector 类别中选择一个或多个指标。

查看 Connect 集群日志

您可以在 Connect 集群页面中或使用 Logs Explorer 查看 Connect 集群及其连接器的日志。

查看集群日志

如需查看 Connect 集群的日志,请执行以下步骤:

  1. 前往 Managed Service for Apache Kafka > Connect 集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击日志。日志标签页会显示所选 Connect 集群的日志。这些日志会实时更新。

  4. 可选:如需查看历史日志,请使用日志浏览器。在日志标签页中,点击 在 Logs Explorer 中查看。系统会打开 Logs Explorer,其中预先填充了查询。

查看连接器日志

如需查看连接器的日志,请执行以下步骤:

  1. 前往 Managed Service for Apache Kafka > Connect 集群页面。

    前往“连接集群”

  2. 点击 Connect 集群的名称。

  3. 点击资源。

  4. 点击连接器的名称。

  5. 点击日志。日志标签页会显示连接器的日志。这些日志会实时更新。

    此视图会过滤包含连接器名称的日志条目。它可能不包含与连接器相关的所有日志。如需查看完整的日志集,请参阅 Connect 集群日志。

  6. 可选:如需查看历史日志,请使用日志浏览器。在日志标签页中,点击 在 Logs Explorer 中查看。系统会打开 Logs Explorer,其中预先填充了查询。

使用 Logs Explorer 查看日志

在Logs Explorer中,您可以使用以下查询来查询 Connect 集群日志:

resource.type="managedkafka.googleapis.com/ConnectCluster"
resource.labels.cluster_id="CONNECT_CLUSTER_NAME"
resource.labels.location="LOCATION"

替换以下内容:

  • CONNECT_CLUSTER_NAME:Connect 集群的名称
  • LOCATION:Connect 集群的位置

Connect 集群日志包含集群发出的所有日志,包括连接器的日志条目。

如需详细了解如何在 Logs Explorer 中编写查询,请参阅使用 Logging 查询语言构建和保存查询。

后续步骤

Apache Kafka® 是 Apache Software Foundation 或其关联公司在美国和/或其他国家/地区的注册商标。