PubSub
编辑PubSub
编辑指标
编辑pubsub
数据集从 Google Cloud Platform 中的 PubSub 获取指标。它包含从 GCP PubSub Monitoring API 导出的所有指标。
您可以指定一个区域来获取指标,例如 us-central1
。请注意,GCP PubSub 不使用区域,因此 us-central1-a
将返回空值。如果未指定区域,它将返回所有存储桶的指标。
示例事件
编辑示例
pubsub
的示例事件如下所示
{ "@timestamp": "2017-10-12T08:05:34.853Z", "cloud": { "account": { "id": "elastic-obs-integrations-dev", "name": "elastic-obs-integrations-dev" }, "instance": { "id": "4751091017865185079", "name": "gke-cluster-1-default-pool-6617a8aa-5clh" }, "machine": { "type": "e2-medium" }, "provider": "gcp", "availability_zone": "us-central1-c", "region": "us-central1" }, "event": { "dataset": "gcp.pubsub", "duration": 115000, "module": "gcp" }, "gcp": { "pubsub": { "subscription": { "backlog": { "bytes": 0 } } }, "labels": { "user": { "goog-gke-node": "" } } }, "host": { "id": "4751091017865185079", "name": "gke-cluster-1-default-pool-6617a8aa-5clh" }, "metricset": { "name": "pubsub", "period": 10000 }, "service": { "type": "gcp" } }
导出的字段
编辑ECS 字段参考
有关 ECS 字段的详细信息,请参阅以下文档。
导出的字段
字段 | 描述 | 类型 | 指标类型 |
---|---|---|---|
@timestamp |
事件时间戳。 |
date |
|
agent.id |
此代理的唯一标识符(如果存在)。示例:对于 Beats,这将是 beat.id。 |
keyword |
|
cloud.account.id |
用于在多租户环境中标识不同实体的云帐户或组织 ID。示例:AWS 帐户 ID、Google Cloud ORG ID 或其他唯一标识符。 |
keyword |
|
cloud.image.id |
云实例的镜像 ID。 |
keyword |
|
data_stream.dataset |
数据流数据集。 |
constant_keyword |
|
data_stream.namespace |
数据流命名空间。 |
constant_keyword |
|
data_stream.type |
数据流类型。 |
constant_keyword |
|
event.dataset |
事件数据集 |
constant_keyword |
|
event.module |
事件模块 |
constant_keyword |
|
gcp.labels.metadata.* |
object |
||
gcp.labels.metrics.* |
object |
||
gcp.labels.resource.* |
object |
||
gcp.labels.system.* |
object |
||
gcp.labels.user.* |
object |
||
gcp.labels_fingerprint |
标签字段的哈希值。 |
keyword |
|
gcp.metrics.... |
从 Google Cloud API 查询返回的指标。 |
object |
|
gcp.pubsub.snapshot.backlog.bytes |
快照中保留的消息的总字节大小。 |
long |
gauge |
gcp.pubsub.snapshot.backlog_bytes_by_region.bytes |
快照中保留的消息的总字节大小,按云区域细分。 |
long |
gauge |
gcp.pubsub.snapshot.config_updates.count |
配置更改累积计数的增量,按操作类型和结果分组。 |
long |
gauge |
gcp.pubsub.snapshot.num_messages.value |
快照中保留的消息数。 |
long |
gauge |
gcp.pubsub.snapshot.num_messages_by_region.value |
快照中保留的消息数,按云区域细分。 |
long |
gauge |
gcp.pubsub.snapshot.oldest_message_age.sec |
快照中保留的最旧消息的年龄(以秒为单位)。 |
long |
gauge |
gcp.pubsub.snapshot.oldest_message_age_by_region.sec |
快照中保留的最旧消息的年龄(以秒为单位),按云区域细分。 |
long |
gauge |
gcp.pubsub.subscription.ack_latencies.value |
确认延迟的分布(以毫秒为单位)。确认延迟是指 Cloud Pub/Sub 向订阅者客户端发送消息与 Cloud Pub/Sub 接收到该消息的确认请求之间的时间。 |
object |
|
gcp.pubsub.subscription.ack_message.count |
通过确认请求确认的消息的累积计数的增量,按交付类型分组。 |
long |
gauge |
gcp.pubsub.subscription.backlog.bytes |
订阅中未确认消息(又名积压消息)的总字节大小。 |
long |
gauge |
gcp.pubsub.subscription.byte_cost.bytes |
操作累积成本的增量,以字节为单位衡量。这用于衡量配额利用率。 |
long |
gauge |
gcp.pubsub.subscription.config_updates.count |
每个订阅的配置更改累积计数的增量,按操作类型和结果分组。 |
long |
gauge |
gcp.pubsub.subscription.dead_letter_message.count |
发布到死信主题的消息的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.mod_ack_deadline_message.count |
通过 ModifyAckDeadline 请求更新截止时间的消息的累积计数的增量,按交付类型分组。 |
long |
gauge |
gcp.pubsub.subscription.mod_ack_deadline_message_operation.count |
ModifyAckDeadline 消息操作累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.mod_ack_deadline_request.count |
ModifyAckDeadline 请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.num_outstanding_messages.value |
已交付到订阅的推送端点但尚未确认的消息数。 |
long |
gauge |
gcp.pubsub.subscription.num_undelivered_messages.value |
订阅中未确认的消息(又名积压消息)的数量。 |
long |
gauge |
gcp.pubsub.subscription.oldest_retained_acked_message_age.sec |
订阅中保留的最旧已确认消息的年龄(以秒为单位)。 |
long |
gauge |
gcp.pubsub.subscription.oldest_retained_acked_message_age_by_region.value |
订阅中保留的最旧已确认消息的年龄(以秒为单位),按云区域细分。 |
long |
gauge |
gcp.pubsub.subscription.oldest_unacked_message_age.sec |
订阅中最旧的未确认消息(又名积压消息)的年龄(以秒为单位)。 |
long |
gauge |
gcp.pubsub.subscription.oldest_unacked_message_age_by_region.value |
订阅中最旧的未确认消息的年龄(以秒为单位),按云区域细分。 |
long |
gauge |
gcp.pubsub.subscription.pull_ack_message_operation.count |
确认消息操作累积计数的增量,按结果分组。有关消息操作的定义,请参见 Cloud Pub/Sub 指标 subscription/mod_ack_deadline_message_operation_count。 |
long |
gauge |
gcp.pubsub.subscription.pull_ack_request.count |
确认请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.pull_message_operation.count |
拉取消息操作累积计数的增量,按结果分组。有关消息操作的定义,请参见 Cloud Pub/Sub 指标 subscription/mod_ack_deadline_message_operation_count。 |
long |
gauge |
gcp.pubsub.subscription.pull_request.count |
拉取请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.push_request.count |
推送尝试的累积计数的增量,按结果分组。与拉取不同,推送服务器实现不批量处理用户消息。因此,每个请求仅包含一条用户消息。推送服务器会在发生错误时重试,因此给定的用户消息可能会出现多次。 |
long |
gauge |
gcp.pubsub.subscription.push_request_latencies.value |
推送请求延迟的分布(以微秒为单位),按结果分组。 |
object |
|
gcp.pubsub.subscription.retained_acked.bytes |
订阅中保留的已确认消息的总字节大小。 |
long |
gauge |
gcp.pubsub.subscription.retained_acked_bytes_by_region.bytes |
订阅中保留的已确认消息的总字节大小,按云区域细分。 |
long |
gauge |
gcp.pubsub.subscription.seek_request.count |
查找尝试的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.sent_message.count |
Cloud Pub/Sub 发送到订阅者客户端的消息的累积计数的增量,按交付类型分组。 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_ack_message_operation.count |
StreamingPull 确认消息操作的累积计数的增量,按结果分组。有关消息操作的定义,请参见 Cloud Pub/Sub 指标 subscription/mod_ack_deadline_message_operation_count。 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_ack_request.count |
具有非空确认 ID 的流式拉取请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_message_operation.count |
流式拉取消息操作的累积计数的增量,按结果分组。有关消息操作的定义,请参见 Cloud Pub/Sub 指标 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_mod_ack_deadline_message_operation.count |
StreamingPull ModifyAckDeadline 操作的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_mod_ack_deadline_request.count |
具有非空 ModifyAckDeadline 字段的流式拉取请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.streaming_pull_response.count |
流式拉取响应的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.subscription.unacked_bytes_by_region.bytes |
订阅中未确认消息的总字节大小,按云区域细分。 |
long |
gauge |
gcp.pubsub.topic.byte_cost.bytes |
操作成本的增量,以字节为单位衡量。这用于衡量配额的利用率。 |
long |
gauge |
gcp.pubsub.topic.config_updates.count |
配置更改累积计数的增量,按操作类型和结果分组。 |
long |
gauge |
gcp.pubsub.topic.message_sizes.bytes |
发布消息大小的分布(以字节为单位) |
object |
|
gcp.pubsub.topic.oldest_retained_acked_message_age_by_region.value |
主题中保留的最旧已确认消息的年龄(以秒为单位),按云区域细分。 |
long |
gauge |
gcp.pubsub.topic.oldest_unacked_message_age_by_region.value |
主题中最旧的未确认消息的年龄(以秒为单位),按云区域细分。 |
long |
gauge |
gcp.pubsub.topic.retained_acked_bytes_by_region.bytes |
主题中保留的已确认消息的总字节大小,按云区域细分。 |
long |
gauge |
gcp.pubsub.topic.send_message_operation.count |
发布消息操作累积计数的增量,按结果分组。有关消息操作的定义,请参见 Cloud Pub/Sub 指标 subscription/mod_ack_deadline_message_operation_count。 |
long |
gauge |
gcp.pubsub.topic.send_request.count |
发布请求的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.topic.streaming_pull_response.count |
流式拉取响应的累积计数的增量,按结果分组。 |
long |
gauge |
gcp.pubsub.topic.unacked_bytes_by_region.bytes |
主题中未确认消息的总字节大小,按云区域细分。 |
long |
gauge |
host.containerized |
如果主机是容器。 |
boolean |
|
host.os.build |
操作系统构建信息。 |
keyword |
|
host.os.codename |
操作系统代号(如果有)。 |
keyword |
更新日志
编辑更新日志
版本 | 详细信息 | Kibana 版本 |
---|---|---|
2.39.0 |
增强功能 (查看拉取请求) |
8.13.0 或更高版本 |
2.38.0 |
增强功能 (查看拉取请求) Bug 修复 (查看拉取请求) |
8.13.0 或更高版本 |
2.37.2 |
缺陷修复 (查看拉取请求) |
8.13.0 或更高版本 |
2.37.1 |
增强 (查看拉取请求) |
8.13.0 或更高版本 |
2.37.0 |
增强 (查看拉取请求) |
8.13.0 或更高版本 |
2.36.0 |
增强 (查看拉取请求) |
8.13.0 或更高版本 |
2.35.0 |
增强 (查看拉取请求) |
8.13.0 或更高版本 |
2.34.1 |
缺陷修复 (查看拉取请求) |
8.12.0 或更高版本 |
2.34.0 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.33.2 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.33.1 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.33.0 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.32.1 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.32.0 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
2.31.2 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.31.1 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.31.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.30.1 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.30.0 |
增强 (查看拉取请求) 增强 (查看拉取请求) 缺陷修复 (查看拉取请求) 缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.29.1 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.29.0 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.5 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.4 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.3 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.2 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.1 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.28.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.27.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.26.0 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.25.1 |
缺陷修复 (查看拉取请求) |
8.7.1 或更高版本 |
2.25.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.24.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.23.0 |
增强 (查看拉取请求) |
8.7.1 或更高版本 |
2.22.1 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.22.0 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.21.0 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.20.1 |
缺陷修复 (查看拉取请求) |
8.6.0 或更高版本 |
2.20.0 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.19.1 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.19.0 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.18.0 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.17.2 |
缺陷修复 (查看拉取请求) |
8.6.0 或更高版本 |
2.17.1 |
增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.17.0 |
增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) |
8.6.0 或更高版本 |
2.16.2 |
缺陷修复 (查看拉取请求) |
8.5.0 或更高版本 |
2.16.1 |
缺陷修复 (查看拉取请求) |
8.5.0 或更高版本 |
2.16.0 |
增强 (查看拉取请求) |
8.5.0 或更高版本 |
2.15.2 |
增强 (查看拉取请求) |
8.5.0 或更高版本 |
2.15.1 |
增强 (查看拉取请求) |
8.5.0 或更高版本 |
2.15.0 |
增强 (查看拉取请求) 增强 (查看拉取请求) |
8.5.0 或更高版本 |
2.14.0 |
增强 (查看拉取请求) |
8.3.0 或更高版本 |
2.13.0 |
增强 (查看拉取请求) |
8.3.0 或更高版本 |
2.12.1 |
缺陷修复 (查看拉取请求) |
7.17.6 或更高版本 |
2.12.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.12 |
Bug 修复 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.11 |
Bug 修复 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.10 |
增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.10-beta.6 |
增强 (查看拉取请求) |
— |
2.11.10-beta.5 |
增强 (查看拉取请求) |
— |
2.11.10-beta.4 |
增强 (查看拉取请求) |
— |
2.11.10-beta.3 |
增强 (查看拉取请求) |
— |
2.11.10-beta.2 |
增强 (查看拉取请求) |
— |
2.11.10-beta.1 |
增强 (查看拉取请求) |
— |
2.11.9 |
Bug 修复 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.8 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.7 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.6 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.5 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.4 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.3 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.2 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.1 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.11.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.10.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.9.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.8.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.7.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.6.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.5.0 |
增强 (查看拉取请求) Bug 修复 (查看拉取请求) Bug 修复 (查看拉取请求) Bug 修复 (查看拉取请求) 增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.4.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.3.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.2.1 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.2.0 |
增强 (查看拉取请求) |
7.17.6 或更高版本 |
2.1.0 |
增强 (foobar[查看拉取请求]) |
7.17.6 或更高版本 |
2.0.0 |
重大更改 (查看拉取请求) 此更改涉及从输入级别配置移动到包级别配置的 启用 GCP 集成的用户在将策略升级到此版本时将需要再次输入这些变量的值。 增强 (查看拉取请求) 增强 (查看拉取请求) 增强 (查看拉取请求) |
8.3.0 或更高版本 |
1.10.0 |
增强 (查看拉取请求) |
7.17.0 或更高版本 |
1.9.2 |
Bug 修复 (查看拉取请求) |
7.17.0 或更高版本 |
1.9.1 |
增强 (查看拉取请求) |
7.17.0 或更高版本 |
1.9.0 |
增强 (查看拉取请求) |
7.17.0 或更高版本 |
1.8.0 |
增强 (查看拉取请求) |
7.17.0 或更高版本 |
1.7.0 |
增强 (查看拉取请求) Bug 修复 (查看拉取请求) |
— |
1.6.1 |
增强 (查看拉取请求) |
7.16.3 或更高版本 |
1.6.0 |
增强 (查看拉取请求) |
— |
1.5.1 |
增强 (查看拉取请求) |
7.16.3 或更高版本 |
1.5.0 |
增强 (查看拉取请求) |
7.16.3 或更高版本 |
1.4.2 |
Bug 修复 (查看拉取请求) |
7.16.3 或更高版本 |
1.4.1 |
Bug 修复 (查看拉取请求) |
7.16.3 或更高版本 |
1.4.0 |
增强 (查看拉取请求) |
— |
1.3.1 |
Bug 修复 (查看拉取请求) |
7.15.0 或更高版本 |
1.3.0 |
增强 (查看拉取请求) |
7.15.0 或更高版本 |
1.2.2 |
Bug 修复 (查看拉取请求) |
7.15.0 或更高版本 |
1.2.1 |
Bug 修复 (查看拉取请求) |
— |
1.2.0 |
增强 (查看拉取请求) |
7.15.0 或更高版本 |
1.1.2 |
增强 (查看拉取请求) |
7.15.0 或更高版本 |
1.1.1 |
Bug 修复 (查看拉取请求) |
— |
1.1.0 |
增强 (查看拉取请求) |
7.15.0 或更高版本 |
1.0.0 |
增强 (查看拉取请求) 增强 (查看拉取请求) |
— |
0.3.3 |
增强 (查看拉取请求) |
— |
0.3.2 |
增强 (查看拉取请求) |
— |
0.3.1 |
增强 (查看拉取请求) |
— |
0.3.0 |
增强 (查看拉取请求) |
— |
0.2.0 |
增强 (查看拉取请求) |
— |
0.1.0 |
增强 (查看拉取请求) |
— |
0.0.2 |
增强 (查看拉取请求) |
— |
0.0.1 |
增强 (查看拉取请求) |
— |