- Elasticsearch 指南其他版本
- 8.17 中的新功能
- Elasticsearch 基础
- 快速入门
- 设置 Elasticsearch
- 升级 Elasticsearch
- 索引模块
- 映射
- 文本分析
- 索引模板
- 数据流
- 摄取管道
- 别名
- 搜索您的数据
- 重新排名
- 查询 DSL
- 聚合
- 地理空间分析
- 连接器
- EQL
- ES|QL
- SQL
- 脚本
- 数据管理
- 自动缩放
- 监视集群
- 汇总或转换数据
- 设置高可用性集群
- 快照和还原
- 保护 Elastic Stack 的安全
- Watcher
- 命令行工具
- elasticsearch-certgen
- elasticsearch-certutil
- elasticsearch-create-enrollment-token
- elasticsearch-croneval
- elasticsearch-keystore
- elasticsearch-node
- elasticsearch-reconfigure-node
- elasticsearch-reset-password
- elasticsearch-saml-metadata
- elasticsearch-service-tokens
- elasticsearch-setup-passwords
- elasticsearch-shard
- elasticsearch-syskeygen
- elasticsearch-users
- 优化
- 故障排除
- 修复常见的集群问题
- 诊断未分配的分片
- 向系统中添加丢失的层
- 允许 Elasticsearch 在系统中分配数据
- 允许 Elasticsearch 分配索引
- 索引将索引分配过滤器与数据层节点角色混合,以在数据层之间移动
- 没有足够的节点来分配所有分片副本
- 单个节点上索引的分片总数已超过
- 每个节点的分片总数已达到
- 故障排除损坏
- 修复磁盘空间不足的数据节点
- 修复磁盘空间不足的主节点
- 修复磁盘空间不足的其他角色节点
- 启动索引生命周期管理
- 启动快照生命周期管理
- 从快照恢复
- 故障排除损坏的存储库
- 解决重复的快照策略失败问题
- 故障排除不稳定的集群
- 故障排除发现
- 故障排除监控
- 故障排除转换
- 故障排除 Watcher
- 故障排除搜索
- 故障排除分片容量健康问题
- 故障排除不平衡的集群
- 捕获诊断信息
- REST API
- API 约定
- 通用选项
- REST API 兼容性
- 自动缩放 API
- 行为分析 API
- 紧凑和对齐文本 (CAT) API
- 集群 API
- 跨集群复制 API
- 连接器 API
- 数据流 API
- 文档 API
- 丰富 API
- EQL API
- ES|QL API
- 功能 API
- Fleet API
- 图表探索 API
- 索引 API
- 别名是否存在
- 别名
- 分析
- 分析索引磁盘使用量
- 清除缓存
- 克隆索引
- 关闭索引
- 创建索引
- 创建或更新别名
- 创建或更新组件模板
- 创建或更新索引模板
- 创建或更新索引模板(旧版)
- 删除组件模板
- 删除悬挂索引
- 删除别名
- 删除索引
- 删除索引模板
- 删除索引模板(旧版)
- 存在
- 字段使用情况统计信息
- 刷新
- 强制合并
- 获取别名
- 获取组件模板
- 获取字段映射
- 获取索引
- 获取索引设置
- 获取索引模板
- 获取索引模板(旧版)
- 获取映射
- 导入悬挂索引
- 索引恢复
- 索引段
- 索引分片存储
- 索引统计信息
- 索引模板是否存在(旧版)
- 列出悬挂索引
- 打开索引
- 刷新
- 解析索引
- 解析集群
- 翻转
- 收缩索引
- 模拟索引
- 模拟模板
- 拆分索引
- 解冻索引
- 更新索引设置
- 更新映射
- 索引生命周期管理 API
- 推理 API
- 信息 API
- 摄取 API
- 许可 API
- Logstash API
- 机器学习 API
- 机器学习异常检测 API
- 机器学习数据帧分析 API
- 机器学习训练模型 API
- 迁移 API
- 节点生命周期 API
- 查询规则 API
- 重新加载搜索分析器 API
- 存储库计量 API
- 汇总 API
- 根 API
- 脚本 API
- 搜索 API
- 搜索应用程序 API
- 可搜索快照 API
- 安全 API
- 身份验证
- 更改密码
- 清除缓存
- 清除角色缓存
- 清除权限缓存
- 清除 API 密钥缓存
- 清除服务帐户令牌缓存
- 创建 API 密钥
- 创建或更新应用程序权限
- 创建或更新角色映射
- 创建或更新角色
- 批量创建或更新角色 API
- 批量删除角色 API
- 创建或更新用户
- 创建服务帐户令牌
- 委托 PKI 身份验证
- 删除应用程序权限
- 删除角色映射
- 删除角色
- 删除服务帐户令牌
- 删除用户
- 禁用用户
- 启用用户
- 注册 Kibana
- 注册节点
- 获取 API 密钥信息
- 获取应用程序权限
- 获取内置权限
- 获取角色映射
- 获取角色
- 查询角色
- 获取服务帐户
- 获取服务帐户凭据
- 获取安全设置
- 获取令牌
- 获取用户权限
- 获取用户
- 授予 API 密钥
- 具有权限
- 使 API 密钥失效
- 使令牌失效
- OpenID Connect 准备身份验证
- OpenID Connect 身份验证
- OpenID Connect 注销
- 查询 API 密钥信息
- 查询用户
- 更新 API 密钥
- 更新安全设置
- 批量更新 API 密钥
- SAML 准备身份验证
- SAML 身份验证
- SAML 注销
- SAML 失效
- SAML 完成注销
- SAML 服务提供商元数据
- SSL 证书
- 激活用户配置文件
- 禁用用户配置文件
- 启用用户配置文件
- 获取用户配置文件
- 建议用户配置文件
- 更新用户配置文件数据
- 具有用户配置文件权限
- 创建跨集群 API 密钥
- 更新跨集群 API 密钥
- 快照和还原 API
- 快照生命周期管理 API
- SQL API
- 同义词 API
- 文本结构 API
- 转换 API
- 使用情况 API
- Watcher API
- 定义
- 迁移指南
- 发行说明
- Elasticsearch 版本 8.17.0
- Elasticsearch 版本 8.16.1
- Elasticsearch 版本 8.16.0
- Elasticsearch 版本 8.15.5
- Elasticsearch 版本 8.15.4
- Elasticsearch 版本 8.15.3
- Elasticsearch 版本 8.15.2
- Elasticsearch 版本 8.15.1
- Elasticsearch 版本 8.15.0
- Elasticsearch 版本 8.14.3
- Elasticsearch 版本 8.14.2
- Elasticsearch 版本 8.14.1
- Elasticsearch 版本 8.14.0
- Elasticsearch 版本 8.13.4
- Elasticsearch 版本 8.13.3
- Elasticsearch 版本 8.13.2
- Elasticsearch 版本 8.13.1
- Elasticsearch 版本 8.13.0
- Elasticsearch 版本 8.12.2
- Elasticsearch 版本 8.12.1
- Elasticsearch 版本 8.12.0
- Elasticsearch 版本 8.11.4
- Elasticsearch 版本 8.11.3
- Elasticsearch 版本 8.11.2
- Elasticsearch 版本 8.11.1
- Elasticsearch 版本 8.11.0
- Elasticsearch 版本 8.10.4
- Elasticsearch 版本 8.10.3
- Elasticsearch 版本 8.10.2
- Elasticsearch 版本 8.10.1
- Elasticsearch 版本 8.10.0
- Elasticsearch 版本 8.9.2
- Elasticsearch 版本 8.9.1
- Elasticsearch 版本 8.9.0
- Elasticsearch 版本 8.8.2
- Elasticsearch 版本 8.8.1
- Elasticsearch 版本 8.8.0
- Elasticsearch 版本 8.7.1
- Elasticsearch 版本 8.7.0
- Elasticsearch 版本 8.6.2
- Elasticsearch 版本 8.6.1
- Elasticsearch 版本 8.6.0
- Elasticsearch 版本 8.5.3
- Elasticsearch 版本 8.5.2
- Elasticsearch 版本 8.5.1
- Elasticsearch 版本 8.5.0
- Elasticsearch 版本 8.4.3
- Elasticsearch 版本 8.4.2
- Elasticsearch 版本 8.4.1
- Elasticsearch 版本 8.4.0
- Elasticsearch 版本 8.3.3
- Elasticsearch 版本 8.3.2
- Elasticsearch 版本 8.3.1
- Elasticsearch 版本 8.3.0
- Elasticsearch 版本 8.2.3
- Elasticsearch 版本 8.2.2
- Elasticsearch 版本 8.2.1
- Elasticsearch 版本 8.2.0
- Elasticsearch 版本 8.1.3
- Elasticsearch 版本 8.1.2
- Elasticsearch 版本 8.1.1
- Elasticsearch 版本 8.1.0
- Elasticsearch 版本 8.0.1
- Elasticsearch 版本 8.0.0
- Elasticsearch 版本 8.0.0-rc2
- Elasticsearch 版本 8.0.0-rc1
- Elasticsearch 版本 8.0.0-beta1
- Elasticsearch 版本 8.0.0-alpha2
- Elasticsearch 版本 8.0.0-alpha1
- 依赖项和版本
IP 前缀聚合
编辑IP 前缀聚合
编辑一种桶聚合,它根据 IP 地址的网络或子网络对文档进行分组。一个 IP 地址由两组位组成:最高有效位表示网络前缀,最低有效位表示主机。
示例
编辑例如,考虑以下索引
resp = client.indices.create( index="network-traffic", mappings={ "properties": { "ipv4": { "type": "ip" }, "ipv6": { "type": "ip" } } }, ) print(resp) resp1 = client.bulk( index="network-traffic", refresh=True, operations=[ { "index": { "_id": 0 } }, { "ipv4": "192.168.1.10", "ipv6": "2001:db8:a4f8:112a:6001:0:12:7f10" }, { "index": { "_id": 1 } }, { "ipv4": "192.168.1.12", "ipv6": "2001:db8:a4f8:112a:6001:0:12:7f12" }, { "index": { "_id": 2 } }, { "ipv4": "192.168.1.33", "ipv6": "2001:db8:a4f8:112a:6001:0:12:7f33" }, { "index": { "_id": 3 } }, { "ipv4": "192.168.1.10", "ipv6": "2001:db8:a4f8:112a:6001:0:12:7f10" }, { "index": { "_id": 4 } }, { "ipv4": "192.168.2.41", "ipv6": "2001:db8:a4f8:112c:6001:0:12:7f41" }, { "index": { "_id": 5 } }, { "ipv4": "192.168.2.10", "ipv6": "2001:db8:a4f8:112c:6001:0:12:7f10" }, { "index": { "_id": 6 } }, { "ipv4": "192.168.2.23", "ipv6": "2001:db8:a4f8:112c:6001:0:12:7f23" }, { "index": { "_id": 7 } }, { "ipv4": "192.168.3.201", "ipv6": "2001:db8:a4f8:114f:6001:0:12:7201" }, { "index": { "_id": 8 } }, { "ipv4": "192.168.3.107", "ipv6": "2001:db8:a4f8:114f:6001:0:12:7307" } ], ) print(resp1)
response = client.indices.create( index: 'network-traffic', body: { mappings: { properties: { "ipv4": { type: 'ip' }, "ipv6": { type: 'ip' } } } } ) puts response response = client.bulk( index: 'network-traffic', refresh: true, body: [ { index: { _id: 0 } }, { "ipv4": '192.168.1.10', "ipv6": '2001:db8:a4f8:112a:6001:0:12:7f10' }, { index: { _id: 1 } }, { "ipv4": '192.168.1.12', "ipv6": '2001:db8:a4f8:112a:6001:0:12:7f12' }, { index: { _id: 2 } }, { "ipv4": '192.168.1.33', "ipv6": '2001:db8:a4f8:112a:6001:0:12:7f33' }, { index: { _id: 3 } }, { "ipv4": '192.168.1.10', "ipv6": '2001:db8:a4f8:112a:6001:0:12:7f10' }, { index: { _id: 4 } }, { "ipv4": '192.168.2.41', "ipv6": '2001:db8:a4f8:112c:6001:0:12:7f41' }, { index: { _id: 5 } }, { "ipv4": '192.168.2.10', "ipv6": '2001:db8:a4f8:112c:6001:0:12:7f10' }, { index: { _id: 6 } }, { "ipv4": '192.168.2.23', "ipv6": '2001:db8:a4f8:112c:6001:0:12:7f23' }, { index: { _id: 7 } }, { "ipv4": '192.168.3.201', "ipv6": '2001:db8:a4f8:114f:6001:0:12:7201' }, { index: { _id: 8 } }, { "ipv4": '192.168.3.107', "ipv6": '2001:db8:a4f8:114f:6001:0:12:7307' } ] ) puts response
const response = await client.indices.create({ index: "network-traffic", mappings: { properties: { ipv4: { type: "ip", }, ipv6: { type: "ip", }, }, }, }); console.log(response); const response1 = await client.bulk({ index: "network-traffic", refresh: "true", operations: [ { index: { _id: 0, }, }, { ipv4: "192.168.1.10", ipv6: "2001:db8:a4f8:112a:6001:0:12:7f10", }, { index: { _id: 1, }, }, { ipv4: "192.168.1.12", ipv6: "2001:db8:a4f8:112a:6001:0:12:7f12", }, { index: { _id: 2, }, }, { ipv4: "192.168.1.33", ipv6: "2001:db8:a4f8:112a:6001:0:12:7f33", }, { index: { _id: 3, }, }, { ipv4: "192.168.1.10", ipv6: "2001:db8:a4f8:112a:6001:0:12:7f10", }, { index: { _id: 4, }, }, { ipv4: "192.168.2.41", ipv6: "2001:db8:a4f8:112c:6001:0:12:7f41", }, { index: { _id: 5, }, }, { ipv4: "192.168.2.10", ipv6: "2001:db8:a4f8:112c:6001:0:12:7f10", }, { index: { _id: 6, }, }, { ipv4: "192.168.2.23", ipv6: "2001:db8:a4f8:112c:6001:0:12:7f23", }, { index: { _id: 7, }, }, { ipv4: "192.168.3.201", ipv6: "2001:db8:a4f8:114f:6001:0:12:7201", }, { index: { _id: 8, }, }, { ipv4: "192.168.3.107", ipv6: "2001:db8:a4f8:114f:6001:0:12:7307", }, ], }); console.log(response1);
PUT network-traffic { "mappings": { "properties": { "ipv4": { "type": "ip" }, "ipv6": { "type": "ip" } } } } POST /network-traffic/_bulk?refresh {"index":{"_id":0}} {"ipv4":"192.168.1.10","ipv6":"2001:db8:a4f8:112a:6001:0:12:7f10"} {"index":{"_id":1}} {"ipv4":"192.168.1.12","ipv6":"2001:db8:a4f8:112a:6001:0:12:7f12"} {"index":{"_id":2}} { "ipv4":"192.168.1.33","ipv6":"2001:db8:a4f8:112a:6001:0:12:7f33"} {"index":{"_id":3}} {"ipv4":"192.168.1.10","ipv6":"2001:db8:a4f8:112a:6001:0:12:7f10"} {"index":{"_id":4}} {"ipv4":"192.168.2.41","ipv6":"2001:db8:a4f8:112c:6001:0:12:7f41"} {"index":{"_id":5}} {"ipv4":"192.168.2.10","ipv6":"2001:db8:a4f8:112c:6001:0:12:7f10"} {"index":{"_id":6}} {"ipv4":"192.168.2.23","ipv6":"2001:db8:a4f8:112c:6001:0:12:7f23"} {"index":{"_id":7}} {"ipv4":"192.168.3.201","ipv6":"2001:db8:a4f8:114f:6001:0:12:7201"} {"index":{"_id":8}} {"ipv4":"192.168.3.107","ipv6":"2001:db8:a4f8:114f:6001:0:12:7307"}
以下聚合将文档分组到桶中。每个桶标识一个不同的子网络。通过对 ipv4
字段中的每个 IP 地址应用前缀长度为 24
的网络掩码来计算子网络
resp = client.search( index="network-traffic", size=0, aggs={ "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24 } } }, ) print(resp)
response = client.search( index: 'network-traffic', body: { size: 0, aggregations: { "ipv4-subnets": { ip_prefix: { field: 'ipv4', prefix_length: 24 } } } } ) puts response
const response = await client.search({ index: "network-traffic", size: 0, aggs: { "ipv4-subnets": { ip_prefix: { field: "ipv4", prefix_length: 24, }, }, }, }); console.log(response);
GET /network-traffic/_search { "size": 0, "aggs": { "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24 } } } }
响应
{ ... "aggregations": { "ipv4-subnets": { "buckets": [ { "key": "192.168.1.0", "is_ipv6": false, "doc_count": 4, "prefix_length": 24, "netmask": "255.255.255.0" }, { "key": "192.168.2.0", "is_ipv6": false, "doc_count": 3, "prefix_length": 24, "netmask": "255.255.255.0" }, { "key": "192.168.3.0", "is_ipv6": false, "doc_count": 2, "prefix_length": 24, "netmask": "255.255.255.0" } ] } } }
要聚合 IPv6 地址,请将 is_ipv6
设置为 true
。
resp = client.search( index="network-traffic", size=0, aggs={ "ipv6-subnets": { "ip_prefix": { "field": "ipv6", "prefix_length": 64, "is_ipv6": True } } }, ) print(resp)
response = client.search( index: 'network-traffic', body: { size: 0, aggregations: { "ipv6-subnets": { ip_prefix: { field: 'ipv6', prefix_length: 64, "is_ipv6": true } } } } ) puts response
const response = await client.search({ index: "network-traffic", size: 0, aggs: { "ipv6-subnets": { ip_prefix: { field: "ipv6", prefix_length: 64, is_ipv6: true, }, }, }, }); console.log(response);
GET /network-traffic/_search { "size": 0, "aggs": { "ipv6-subnets": { "ip_prefix": { "field": "ipv6", "prefix_length": 64, "is_ipv6": true } } } }
如果 is_ipv6
为 true
,则响应不包含每个桶的 netmask
。
{ ... "aggregations": { "ipv6-subnets": { "buckets": [ { "key": "2001:db8:a4f8:112a::", "is_ipv6": true, "doc_count": 4, "prefix_length": 64 }, { "key": "2001:db8:a4f8:112c::", "is_ipv6": true, "doc_count": 3, "prefix_length": 64 }, { "key": "2001:db8:a4f8:114f::", "is_ipv6": true, "doc_count": 2, "prefix_length": 64 } ] } } }
参数
编辑-
field
- (必需,字符串)要聚合的文档 IP 地址字段。字段映射类型必须为
ip
。 -
prefix_length
- (必需,整数)网络前缀的长度。对于 IPv4 地址,接受的范围是
[0, 32]
。对于 IPv6 地址,接受的范围是[0, 128]
。 -
is_ipv6
- (可选,布尔值)定义前缀是否应用于 IPv6 地址。仅指定
prefix_length
参数不足以知道 IP 前缀是否应用于 IPv4 或 IPv6 地址。默认为false
。 -
append_prefix_length
- (可选,布尔值)定义前缀长度是否附加到响应中的 IP 地址键。默认为
false
。 -
keyed
- (可选,布尔值)定义桶在响应中是作为哈希还是作为数组返回。默认为
false
。 -
min_doc_count
- (可选,整数)定义要包含在响应中的桶的最小文档数。默认为
1
。
响应主体
编辑-
key
- (字符串)IPv6 或 IPv4 子网。
-
prefix_length
- (整数)用于聚合桶的前缀长度。
-
doc_count
- (整数)与特定 IP 前缀匹配的文档数。
-
is_ipv6
- (布尔值)定义网络掩码是否为 IPv6 网络掩码。
-
netmask
- (字符串)IPv4 网络掩码。如果请求中的
is_ipv6
为true
,则响应中缺少此字段。
键控响应
编辑将 keyed
标志设置为 true
,以将唯一的 IP 地址键与每个桶关联,并将子网络作为哈希而不是数组返回。
示例
resp = client.search( index="network-traffic", size=0, aggs={ "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "keyed": True } } }, ) print(resp)
response = client.search( index: 'network-traffic', body: { size: 0, aggregations: { "ipv4-subnets": { ip_prefix: { field: 'ipv4', prefix_length: 24, keyed: true } } } } ) puts response
const response = await client.search({ index: "network-traffic", size: 0, aggs: { "ipv4-subnets": { ip_prefix: { field: "ipv4", prefix_length: 24, keyed: true, }, }, }, }); console.log(response);
GET /network-traffic/_search { "size": 0, "aggs": { "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "keyed": true } } } }
响应
{ ... "aggregations": { "ipv4-subnets": { "buckets": { "192.168.1.0": { "is_ipv6": false, "doc_count": 4, "prefix_length": 24, "netmask": "255.255.255.0" }, "192.168.2.0": { "is_ipv6": false, "doc_count": 3, "prefix_length": 24, "netmask": "255.255.255.0" }, "192.168.3.0": { "is_ipv6": false, "doc_count": 2, "prefix_length": 24, "netmask": "255.255.255.0" } } } } }
将前缀长度附加到 IP 地址键
编辑将 append_prefix_length
标志设置为 true
,以将 IP 地址键与子网络的网络前缀长度连接起来。
示例
resp = client.search( index="network-traffic", size=0, aggs={ "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "append_prefix_length": True } } }, ) print(resp)
response = client.search( index: 'network-traffic', body: { size: 0, aggregations: { "ipv4-subnets": { ip_prefix: { field: 'ipv4', prefix_length: 24, append_prefix_length: true } } } } ) puts response
const response = await client.search({ index: "network-traffic", size: 0, aggs: { "ipv4-subnets": { ip_prefix: { field: "ipv4", prefix_length: 24, append_prefix_length: true, }, }, }, }); console.log(response);
GET /network-traffic/_search { "size": 0, "aggs": { "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "append_prefix_length": true } } } }
响应
{ ... "aggregations": { "ipv4-subnets": { "buckets": [ { "key": "192.168.1.0/24", "is_ipv6": false, "doc_count": 4, "prefix_length": 24, "netmask": "255.255.255.0" }, { "key": "192.168.2.0/24", "is_ipv6": false, "doc_count": 3, "prefix_length": 24, "netmask": "255.255.255.0" }, { "key": "192.168.3.0/24", "is_ipv6": false, "doc_count": 2, "prefix_length": 24, "netmask": "255.255.255.0" } ] } } }
最小文档计数
编辑使用 min_doc_count
参数仅返回具有最小文档数的桶。
resp = client.search( index="network-traffic", size=0, aggs={ "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "min_doc_count": 3 } } }, ) print(resp)
response = client.search( index: 'network-traffic', body: { size: 0, aggregations: { "ipv4-subnets": { ip_prefix: { field: 'ipv4', prefix_length: 24, min_doc_count: 3 } } } } ) puts response
const response = await client.search({ index: "network-traffic", size: 0, aggs: { "ipv4-subnets": { ip_prefix: { field: "ipv4", prefix_length: 24, min_doc_count: 3, }, }, }, }); console.log(response);
GET /network-traffic/_search { "size": 0, "aggs": { "ipv4-subnets": { "ip_prefix": { "field": "ipv4", "prefix_length": 24, "min_doc_count": 3 } } } }
响应
{ ... "aggregations": { "ipv4-subnets": { "buckets": [ { "key": "192.168.1.0", "is_ipv6": false, "doc_count": 4, "prefix_length": 24, "netmask": "255.255.255.0" }, { "key": "192.168.2.0", "is_ipv6": false, "doc_count": 3, "prefix_length": 24, "netmask": "255.255.255.0" } ] } } }
Was this helpful?
Thank you for your feedback.