Redis

编辑

版本

2.39.0 ( 查看全部 )

兼容的 Kibana 版本

8.13.0 或更高版本

支持的无服务器项目类型
这是什么?

安全性
可观测性

订阅级别
这是什么?

基本

指标

编辑

redis 数据集从 Google Cloud Platform 中的 GCP Memorystore for Redis 中获取指标。它包含从 GCP Redis Monitoring API 导出的所有指标。

示例事件

编辑
示例

redis 的示例事件如下所示

{
    "@timestamp": "2017-10-12T08:05:34.853Z",
    "cloud": {
        "account": {
            "id": "elastic-obs-integrations-dev",
            "name": "elastic-obs-integrations-dev"
        },
        "instance": {
            "id": "4751091017865185079",
            "name": "gke-cluster-1-default-pool-6617a8aa-5clh"
        },
        "machine": {
            "type": "e2-medium"
        },
        "provider": "gcp",
        "availability_zone": "us-central1-c",
        "region": "us-central1"
    },
    "event": {
        "dataset": "gcp.redis",
        "duration": 115000,
        "module": "gcp"
    },
    "gcp": {
        "redis": {
            "clients": {
                "blocked": {
                    "count": 4
                }
            }
        },
        "labels": {
            "user": {
                "goog-gke-node": ""
            }
        }
    },
    "host": {
        "id": "4751091017865185079",
        "name": "gke-cluster-1-default-pool-6617a8aa-5clh"
    },
    "metricset": {
        "name": "metrics",
        "period": 10000
    },
    "service": {
        "type": "gcp"
    }
}

导出字段

编辑

ECS 字段参考

有关 ECS 字段的详细信息,请参阅以下文档

导出字段
字段 描述 类型 单位 指标类型

@timestamp

事件时间戳。

日期

agent.id

此代理的唯一标识符(如果存在)。示例:对于 Beats,这将是 beat.id。

keyword

cloud.account.id

用于在多租户环境中标识不同实体的云帐户或组织 ID。示例:AWS 帐户 ID、Google Cloud ORG ID 或其他唯一标识符。

keyword

cloud.image.id

云实例的映像 ID。

keyword

cloud.instance.id

主机机器的实例 ID。

keyword

cloud.instance.name

主机机器的实例名称。

keyword

cloud.machine.type

主机机器的机器类型。

keyword

data_stream.dataset

数据流数据集。

constant_keyword

data_stream.namespace

数据流命名空间。

constant_keyword

data_stream.type

数据流类型。

constant_keyword

event.dataset

事件数据集

constant_keyword

event.module

事件模块

constant_keyword

gcp.labels.metadata.*

object

gcp.labels.metrics.*

object

gcp.labels.resource.*

object

gcp.labels.system.*

object

gcp.labels.user.*

object

gcp.labels_fingerprint

标签字段的哈希值。

keyword

gcp.metrics....

从 Google Cloud API 查询返回的指标。

object

gcp.redis.clients.blocked.count

被阻止的客户端数量。

long

gauge

gcp.redis.clients.connected.count

客户端连接的数量。

long

gauge

gcp.redis.commands.calls.count

一分钟内此命令调用次数的增量。

long

gauge

gcp.redis.commands.total_time.us

过去一秒钟内此命令所用时间的微秒增量。

long

micros

gauge

gcp.redis.commands.usec_per_call.sec

每个命令每分钟的平均调用时间。

double

s

gauge

gcp.redis.keyspace.avg_ttl.sec

此数据库中键的平均 TTL。

double

s

gauge

gcp.redis.keyspace.keys.count

此数据库中存储的键数。

long

gauge

gcp.redis.keyspace.keys_with_expiration.count

此数据库中具有过期的键数。

long

gauge

gcp.redis.persistence.rdb.bgsave_in_progress

指示正在进行 RDB 保存的标志。

boolean

gcp.redis.replication.master.slaves.lag.sec

副本滞后于主服务器的秒数。

long

s

gauge

gcp.redis.replication.master.slaves.offset.bytes

副本已确认的字节数。

long

byte

gauge

gcp.redis.replication.master_repl_offset.bytes

主服务器已生成并发送到副本的字节数。

long

byte

gauge

gcp.redis.replication.offset_diff.bytes

尚未在所有副本中复制的最大字节数。这是所有副本的复制字节偏移量(主服务器)和复制字节偏移量(副本)之间最大的差异。

long

byte

gauge

gcp.redis.replication.role

返回一个指示节点角色的值。1 表示主服务器,0 表示副本。

long

gauge

gcp.redis.server.uptime.sec

正常运行时间(秒)。

long

s

gauge

gcp.redis.stats.cache_hit_ratio

缓存命中率(以小数形式表示)。

double

gauge

gcp.redis.stats.connections.total.count

服务器接受的总连接数的增量。

long

gauge

gcp.redis.stats.cpu_utilization.sec

Redis 服务器消耗的 CPU 秒数,按系统/用户空间和父/子关系细分。

double

s

gauge

gcp.redis.stats.evicted_keys.count

由于 maxmemory 限制而被逐出的键数的增量。

long

gauge

gcp.redis.stats.expired_keys.count

键过期事件的总数的增量。

long

gauge

gcp.redis.stats.keyspace_hits.count

主字典中成功查找键的数量的增量。

long

gauge

gcp.redis.stats.keyspace_misses.count

主字典中查找键失败的数量的增量。

long

gauge

gcp.redis.stats.memory.maxmemory.mb

Redis 可以消耗的最大内存量。

long

m

gauge

gcp.redis.stats.memory.system_memory_overload_duration.us

实例处于系统内存过载模式的时间量(以微秒为单位)。

long

micros

gauge

gcp.redis.stats.memory.system_memory_usage_ratio

内存使用率(以最大系统内存的比率表示)。

double

gauge

gcp.redis.stats.memory.usage.bytes

Redis 分配的总字节数。

long

byte

gauge

gcp.redis.stats.memory.usage_ratio

内存使用率(以最大内存的比率表示)。

double

gauge

gcp.redis.stats.network_traffic.bytes

发送到/来自 Redis 的总字节数的增量(包括来自命令本身、有效负载数据和分隔符的字节)。

long

byte

gauge

gcp.redis.stats.pubsub.channels.count

具有客户端订阅的 pub/sub 通道的全局数量。

long

gauge

gcp.redis.stats.pubsub.patterns.count

具有客户端订阅的 pub/sub 模式的全局数量。

long

gauge

gcp.redis.stats.reject_connections.count

由于 maxclients 限制而被拒绝的连接数。

long

gauge

host.containerized

如果主机是容器。

boolean

host.os.build

操作系统构建信息。

keyword

host.os.codename

操作系统代号(如果有)。

keyword

更新日志

编辑
更新日志
版本 详细信息 Kibana 版本

2.39.0

增强 ( 查看拉取请求 )
向审计日志添加 related.entity 字段。

8.13.0 或更高版本

2.38.0

增强 ( 查看拉取请求 )
向审计日志添加 policy_violation_infometadatarelated 字段。

Bug 修复 ( 查看拉取请求 )
更新 GCP 审计日志仪表板以使用正确的 email 字段。

8.13.0 或更高版本

2.37.2

Bug 修复 ( 查看拉取请求 )
修复嵌套对象子字段的定义

8.13.0 或更高版本

2.37.1

增强 ( 查看拉取请求 )
改进 GCP 计费文档。

8.13.0 或更高版本

2.37.0

增强 ( 查看拉取请求 )
保留 authenticationInfo.serviceAccountKeyName 数据。

8.13.0 或更高版本

2.36.0

增强 ( 查看拉取请求 )
添加用于仪表板的全局数据集过滤器以提高性能。

8.13.0 或更高版本

2.35.0

增强 ( 查看拉取请求 )
ECS 版本更新至 8.11.0。将 kibana 约束更新为 ^8.13.0。修改了字段定义以删除 ecs@mappings 组件模板中冗余的 ECS 字段。

8.13.0 或更高版本

2.34.1

Bug 修复 ( 查看拉取请求 )
修复 persistence.rdb.bgsave_in_progress 的 Redis 指标类型。指标类型应为布尔值而不是 long。

8.12.0 或更高版本

2.34.0

增强 ( 查看拉取请求 )
向 GCP Compute、Firestore、PostgreSQL 添加标签和处理器。

8.12.0 或更高版本

2.33.2

增强 ( 查看拉取请求 )
向 GCP Storage 添加标签和处理器

8.12.0 或更高版本

2.33.1

增强 ( 查看拉取请求 )
将旧版指标可视化更新为 GCP 计费概述仪表板中的新指标。

8.12.0 或更高版本

2.33.0

增强 ( 查看拉取请求 )
为指标数据流启用时间序列数据。这大大减少了指标的存储,并且有望逐步提高查询[性能](https://elastic.ac.cn/blog/70-percent-storage-savings-for-metrics-with-elastic-observability)。有关更多详细信息,请参阅 https://elastic.ac.cn/guide/en/elasticsearch/reference/current/tsds.html

8.12.0 或更高版本

2.32.1

增强 ( 查看拉取请求 )
在所有指标数据流中添加维度映射和 metrics_fingerprint 字段。

8.12.0 或更高版本

2.32.0

增强 ( 查看拉取请求 )
添加新的计费数据流字段。

8.12.0 或更高版本

2.31.2

Bug 修复 ( 查看拉取请求 )
修复解析具有空 rdata 字段的 DNS 日志的管道错误。

8.7.1 或更高版本

2.31.1

增强 ( 查看拉取请求 )
添加 Cloud Run 文档并修复策略模板名称,以允许将 Cloud Run 日志添加到策略。

8.7.1 或更高版本

2.31.0

增强 ( 查看拉取请求 )
允许用户保留其他被丢弃的字段。

8.7.1 或更高版本

2.30.1

Bug 修复 ( 查看拉取请求 )
修复组字段的映射

8.7.1 或更高版本

2.30.0

增强 ( 查看拉取请求 )
添加 tags.yml 文件,以便将集成的仪表板和保存的搜索标记为“安全解决方案”,并在安全解决方案 UI 中显示。

增强 ( 查看拉取请求 )
将包规范升级到 3.0.0。

Bug 修复 ( 查看拉取请求 )
修复孤立的仪表板引用。

Bug 修复 ( 查看拉取请求 )
添加缺少的仪表板过滤器。

8.7.1 或更高版本

2.29.1

Bug 修复 ( 查看拉取请求 )
向重命名处理器添加 null 检查和 ignore_missing 检查

8.7.1 或更高版本

2.29.0

Bug 修复 ( 查看拉取请求 )
删除 GCP CloudSQL 已弃用、alpha 或 beta 指标并修复字段类型。

8.7.1 或更高版本

2.28.5

增强 (查看拉取请求)
为 GKE、负载均衡、PubSub、Redis 和 Storage 数据流设置指标类型。

8.7.1 或更高版本

2.28.4

增强 (查看拉取请求)
将 GCP 负载均衡 HTTPS 概览仪表板迁移到 lens。

8.7.1 或更高版本

2.28.3

增强 (查看拉取请求)
为 Cloud Run、Compute、Dataproc 和 Firestore 数据流设置指标类型。

8.7.1 或更高版本

2.28.2

增强 (查看拉取请求)
将 GCP 负载均衡 TCP SSL 代理概览仪表板迁移到 lens。

8.7.1 或更高版本

2.28.1

增强 (查看拉取请求)
为 CloudSQL 数据流设置指标类型。

8.7.1 或更高版本

2.28.0

增强 (查看拉取请求)
将 GCP 负载均衡 L3 概览仪表板迁移到 lens。

8.7.1 或更高版本

2.27.0

增强 (查看拉取请求)
添加 GCP CloudSQL MySQL、SQL Server 和 PostgreSQL 仪表板。

8.7.1 或更高版本

2.26.0

Bug 修复 (查看拉取请求)
修复 GCP loadbalancing_metrics 字段前缀。

8.7.1 或更高版本

2.25.1

Bug 修复 (查看拉取请求)
修复对 gcp.audit.authorization_info[].granted 的检查。

8.7.1 或更高版本

2.25.0

增强 (查看拉取请求)
将 GCP 计费输入控制迁移到新的控制面板。

8.7.1 或更高版本

2.24.0

增强 (查看拉取请求)
添加 GCP CloudSQL MySQL、Postgres、SQLServer 数据流

8.7.1 或更高版本

2.23.0

增强 (查看拉取请求)
将安全仪表板转换为 lens。

8.7.1 或更高版本

2.22.1

增强 (查看拉取请求)
更改清单中的所有权。

8.6.0 或更高版本

2.22.0

增强 (查看拉取请求)
确保为管道错误正确设置 event.kind。

8.6.0 或更高版本

2.21.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.8.0。

8.6.0 或更高版本

2.20.1

Bug 修复 (查看拉取请求)
修复 persistence.rdb.bgsave_in_progress 字段的无效 TSDS 指标类型

8.6.0 或更高版本

2.20.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.7.0。

8.6.0 或更高版本

2.19.1

增强 (查看拉取请求)
将计算仪表板迁移到 lens 并添加数据流过滤器。

8.6.0 或更高版本

2.19.0

增强 (查看拉取请求)
添加 Cloud Run 指标数据流。

8.6.0 或更高版本

2.18.0

增强 (查看拉取请求)
支持 GCP PubSub 输入的 subscription_num_goroutinessubscription_max_outstanding_messages

8.6.0 或更高版本

2.17.2

Bug 修复 (查看拉取请求)
修复 Audit 提取管道中的 IP 转换处理器。

8.6.0 或更高版本

2.17.1

增强 (查看拉取请求)
添加了类别和/或子类别。

8.6.0 或更高版本

2.17.0

增强 (查看拉取请求)
添加审计日志概览仪表板

增强 (查看拉取请求)
添加 GKE 概览仪表板

增强 (查看拉取请求)
添加 PubSub 概览仪表板

增强 (查看拉取请求)
添加 Storage 概览仪表板

8.6.0 或更高版本

2.16.2

Bug 修复 (查看拉取请求)
添加逻辑来处理审计中 scalar request.policy 值。

8.5.0 或更高版本

2.16.1

Bug 修复 (查看拉取请求)
使用新式控件替换缺少的输入控制面板。

8.5.0 或更高版本

2.16.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.6.0。

8.5.0 或更高版本

2.15.2

增强 (查看拉取请求)
更新文档。

8.5.0 或更高版本

2.15.1

增强 (查看拉取请求)
添加 GCP 计算管道测试。

8.5.0 或更高版本

2.15.0

增强 (查看拉取请求)
移除对 Kibana 7.17.x 的支持

增强 (查看拉取请求)
支持指标数据流的多个区域

8.5.0 或更高版本

2.14.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.5.0。

8.3.0 或更高版本

2.13.0

增强 (查看拉取请求)
按值迁移仪表板

8.3.0 或更高版本

2.12.1

Bug 修复 (查看拉取请求)
删除重复字段。

7.17.6 或更高版本
8.3.0 或更高版本

2.12.0

增强 (查看拉取请求)
添加 GCP Redis

7.17.6 或更高版本
8.3.0 或更高版本

2.11.12

Bug 修复 (查看拉取请求)
添加 GKE 提取管道。

7.17.6 或更高版本
8.3.0 或更高版本

2.11.11

Bug 修复 (查看拉取请求)
修复 dns.answers.ttl 的类型。

7.17.6 或更高版本
8.3.0 或更高版本

2.11.10

增强 (查看拉取请求)
添加 dataproc 的提取管道。

增强 (查看拉取请求)
添加 GCP 负载均衡提取管道

增强 (查看拉取请求)
添加 GCP PubSub 提取管道

增强 (查看拉取请求)
添加 GCP Storage 提取管道

增强 (查看拉取请求)
添加 GCP Firestore 提取管道

增强 (查看拉取请求)
添加 GCP Compute 提取管道

7.17.6 或更高版本
8.3.0 或更高版本

2.11.10-beta.6

增强 (查看拉取请求)
添加 dataproc 的提取管道。

2.11.10-beta.5

增强 (查看拉取请求)
添加 GCP 负载均衡提取管道

2.11.10-beta.4

增强 (查看拉取请求)
添加 GCP PubSub 提取管道

2.11.10-beta.3

增强 (查看拉取请求)
添加 GCP Storage 提取管道

2.11.10-beta.2

增强 (查看拉取请求)
添加 GCP Firestore 提取管道

2.11.10-beta.1

增强 (查看拉取请求)
添加 GCP Compute 提取管道

2.11.9

Bug 修复 (查看拉取请求)
修复 GKE kubernetes.io 缩进。

7.17.6 或更高版本
8.3.0 或更高版本

2.11.8

增强 (查看拉取请求)
删除重复字段。

7.17.6 或更高版本
8.3.0 或更高版本

2.11.7

增强 (查看拉取请求)
将 Dataproc 轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.6

增强 (查看拉取请求)
将负载均衡轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.5

增强 (查看拉取请求)
将 Storage 轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.4

增强 (查看拉取请求)
将 PubSub 轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.3

增强 (查看拉取请求)
将 GKE 轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.2

增强 (查看拉取请求)
将 Firestore 轻量级模块配置移到集成中

7.17.6 或更高版本
8.3.0 或更高版本

2.11.1

增强 (查看拉取请求)
使用 ECS geo.location 定义。

7.17.6 或更高版本
8.3.0 或更高版本

2.11.0

增强 (查看拉取请求)
将计算轻量级模块配置移入集成

7.17.6 或更高版本
8.3.0 或更高版本

2.10.0

增强 (查看拉取请求)
添加 GCP PubSub 数据流

7.17.6 或更高版本
8.3.0 或更高版本

2.9.0

增强 (查看拉取请求)
添加 GCP Dataproc 数据流

7.17.6 或更高版本
8.3.0 或更高版本

2.8.0

增强 (查看拉取请求)
添加 GCP GKE 数据流

7.17.6 或更高版本
8.3.0 或更高版本

2.7.0

增强 (查看拉取请求)
添加 GCP Storage 数据流

7.17.6 或更高版本
8.3.0 或更高版本

2.6.0

增强 (查看拉取请求)
添加负载均衡日志数据流

7.17.6 或更高版本
8.3.0 或更高版本

2.5.0

增强 (查看拉取请求)
添加 GCP 负载均衡指标集

Bug 修复 (查看拉取请求)
修复 loadbalancing_metrics 中 credentials_json 的转义问题

Bug 修复 (查看拉取请求)
更新 loadbalancing_metrics 默认周期为 60 秒

Bug 修复 (查看拉取请求)
修复 loadbalancing_metrics 的 event.dataset

增强 (查看拉取请求)
添加 loadbalancing_metrics 分布字段

7.17.6 或更高版本
8.3.0 或更高版本

2.4.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.4.0

7.17.6 或更高版本
8.3.0 或更高版本

2.3.0

增强 (查看拉取请求)
为 DNS 公共区域查询日志添加额外的解析

7.17.6 或更高版本
8.3.0 或更高版本

2.2.1

增强 (查看拉取请求)
修复 gcp.compute 的计费策略模板标题和默认周期

7.17.6 或更高版本
8.3.0 或更高版本

2.2.0

增强 (查看拉取请求)
删除 ECS 字段中重复的字段

7.17.6 或更高版本
8.3.0 或更高版本

2.1.0

增强 (foobar[查看拉取请求])
恢复与 7.17 发布版本的兼容性

7.17.6 或更高版本
8.3.0 或更高版本

2.0.0

重大变更 (查看拉取请求)
移动配置以支持指标。此更改是重大更改,因为它将一些配置从顶级变量移动到数据流变量。

此更改涉及 project_idcredentials_filecredentials_json 变量,这些变量从输入级别配置移动到软件包级别配置(因为这些变量在所有输入/数据流中重用)。

启用 GCP 集成的用户在将策略升级到此版本时,需要再次输入这些变量的值。

增强 (查看拉取请求)
添加 GCP 计费数据流

增强 (查看拉取请求)
添加 GCP 计算数据流

增强 (查看拉取请求)
添加 GCP Firestore 数据流

8.3.0 或更高版本

1.10.0

增强 (查看拉取请求)
将软件包更新到 ECS 8.3.0。

7.17.0 或更高版本
8.0.0 或更高版本

1.9.2

Bug 修复 (查看拉取请求)
修复响应状态的 GCP 审计日志解析问题

7.17.0 或更高版本
8.0.0 或更高版本

1.9.1

增强 (查看拉取请求)
更新自述文件

7.17.0 或更高版本
8.0.0 或更高版本

1.9.0

增强 (查看拉取请求)
保留扁平化字段中的请求和响应。

7.17.0 或更高版本
8.0.0 或更高版本

1.8.0

增强 (查看拉取请求)
添加缺少的 cloud.provider 字段。

7.17.0 或更高版本
8.0.0 或更高版本

1.7.0

增强 (查看拉取请求)
为防火墙和 vpc 流日志添加仪表板。

Bug 修复 (查看拉取请求)
为多个 event.* 字段添加缺少的映射。

1.6.1

增强 (查看拉取请求)
阐明 Pub/Sub 输入所需的 GCP 权限。

7.16.3 或更高版本
8.0.0 或更高版本

1.6.0

增强 (查看拉取请求)
更新到 ECS 8.2

1.5.1

增强 (查看拉取请求)
添加多字段的文档

7.16.3 或更高版本
8.0.0 或更高版本

1.5.0

增强 (查看拉取请求)
改进 Google Cloud Platform 文档。

7.16.3 或更高版本
8.0.0 或更高版本

1.4.2

Bug 修复 (查看拉取请求)
删除空值、仅包含点的名称和无效的客户端 IP。

7.16.3 或更高版本
8.0.0 或更高版本

1.4.1

Bug 修复 (查看拉取请求)
修复策略模板中 credentials_json 值的引用问题。

7.16.3 或更高版本
8.0.0 或更高版本

1.4.0

增强 (查看拉取请求)
添加 gcp.dns 集成

1.3.1

Bug 修复 (查看拉取请求)
添加 Ingest Pipeline 脚本以映射 IANA 协议号

7.15.0 或更高版本
8.0.0 或更高版本

1.3.0

增强 (查看拉取请求)
更新到 ECS 8.0

7.15.0 或更高版本
8.0.0 或更高版本

1.2.2

Bug 修复 (查看拉取请求)
使用新的 GeoIP 数据库重新生成测试文件

7.15.0 或更高版本
8.0.0 或更高版本

1.2.1

Bug 修复 (查看拉取请求)
将测试公共 IP 更改为支持的子集

1.2.0

增强 (查看拉取请求)
添加 8.0.0 版本约束

7.15.0 或更高版本
8.0.0 或更高版本

1.1.2

增强 (查看拉取请求)
更新标题和描述。

7.15.0 或更高版本

1.1.1

Bug 修复 (查看拉取请求)
修复检查转发标记的逻辑

1.1.0

增强 (查看拉取请求)
更新到 ECS 1.12.0

7.15.0 或更高版本

1.0.0

增强 (查看拉取请求)
从实验性转为 GA

增强 (查看拉取请求)
从 data_sets 中删除实验性

0.3.3

增强 (查看拉取请求)
转换为生成的 ECS 字段

0.3.2

增强 (查看拉取请求)
更新到 ECS 1.11.0

0.3.1

增强 (查看拉取请求)
转义文档中的特殊字符

0.3.0

增强 (查看拉取请求)
更新集成描述

0.2.0

增强 (查看拉取请求)
设置 "event.module" 和 "event.dataset"

0.1.0

增强 (查看拉取请求)
更新至 ECS 1.10.0 并添加 event.original 选项

0.0.2

增强 (查看拉取请求)
更新至 ECS 1.9.0

0.0.1

增强 (查看拉取请求)
初始发布