- Elasticsearch 指南其他版本
- 8.17 中的新功能
- Elasticsearch 基础
- 快速入门
- 设置 Elasticsearch
- 升级 Elasticsearch
- 索引模块
- 映射
- 文本分析
- 索引模板
- 数据流
- 摄取管道
- 别名
- 搜索您的数据
- 重新排名
- 查询 DSL
- 聚合
- 地理空间分析
- 连接器
- EQL
- ES|QL
- SQL
- 脚本
- 数据管理
- 自动缩放
- 监视集群
- 汇总或转换数据
- 设置高可用性集群
- 快照和还原
- 保护 Elastic Stack 的安全
- Watcher
- 命令行工具
- elasticsearch-certgen
- elasticsearch-certutil
- elasticsearch-create-enrollment-token
- elasticsearch-croneval
- elasticsearch-keystore
- elasticsearch-node
- elasticsearch-reconfigure-node
- elasticsearch-reset-password
- elasticsearch-saml-metadata
- elasticsearch-service-tokens
- elasticsearch-setup-passwords
- elasticsearch-shard
- elasticsearch-syskeygen
- elasticsearch-users
- 优化
- 故障排除
- 修复常见的集群问题
- 诊断未分配的分片
- 向系统中添加丢失的层
- 允许 Elasticsearch 在系统中分配数据
- 允许 Elasticsearch 分配索引
- 索引将索引分配过滤器与数据层节点角色混合,以在数据层之间移动
- 没有足够的节点来分配所有分片副本
- 单个节点上索引的分片总数已超过
- 每个节点的分片总数已达到
- 故障排除损坏
- 修复磁盘空间不足的数据节点
- 修复磁盘空间不足的主节点
- 修复磁盘空间不足的其他角色节点
- 启动索引生命周期管理
- 启动快照生命周期管理
- 从快照恢复
- 故障排除损坏的存储库
- 解决重复的快照策略失败问题
- 故障排除不稳定的集群
- 故障排除发现
- 故障排除监控
- 故障排除转换
- 故障排除 Watcher
- 故障排除搜索
- 故障排除分片容量健康问题
- 故障排除不平衡的集群
- 捕获诊断信息
- REST API
- API 约定
- 通用选项
- REST API 兼容性
- 自动缩放 API
- 行为分析 API
- 紧凑和对齐文本 (CAT) API
- 集群 API
- 跨集群复制 API
- 连接器 API
- 数据流 API
- 文档 API
- 丰富 API
- EQL API
- ES|QL API
- 功能 API
- Fleet API
- 图表探索 API
- 索引 API
- 别名是否存在
- 别名
- 分析
- 分析索引磁盘使用量
- 清除缓存
- 克隆索引
- 关闭索引
- 创建索引
- 创建或更新别名
- 创建或更新组件模板
- 创建或更新索引模板
- 创建或更新索引模板(旧版)
- 删除组件模板
- 删除悬挂索引
- 删除别名
- 删除索引
- 删除索引模板
- 删除索引模板(旧版)
- 存在
- 字段使用情况统计信息
- 刷新
- 强制合并
- 获取别名
- 获取组件模板
- 获取字段映射
- 获取索引
- 获取索引设置
- 获取索引模板
- 获取索引模板(旧版)
- 获取映射
- 导入悬挂索引
- 索引恢复
- 索引段
- 索引分片存储
- 索引统计信息
- 索引模板是否存在(旧版)
- 列出悬挂索引
- 打开索引
- 刷新
- 解析索引
- 解析集群
- 翻转
- 收缩索引
- 模拟索引
- 模拟模板
- 拆分索引
- 解冻索引
- 更新索引设置
- 更新映射
- 索引生命周期管理 API
- 推理 API
- 信息 API
- 摄取 API
- 许可 API
- Logstash API
- 机器学习 API
- 机器学习异常检测 API
- 机器学习数据帧分析 API
- 机器学习训练模型 API
- 迁移 API
- 节点生命周期 API
- 查询规则 API
- 重新加载搜索分析器 API
- 存储库计量 API
- 汇总 API
- 根 API
- 脚本 API
- 搜索 API
- 搜索应用程序 API
- 可搜索快照 API
- 安全 API
- 身份验证
- 更改密码
- 清除缓存
- 清除角色缓存
- 清除权限缓存
- 清除 API 密钥缓存
- 清除服务帐户令牌缓存
- 创建 API 密钥
- 创建或更新应用程序权限
- 创建或更新角色映射
- 创建或更新角色
- 批量创建或更新角色 API
- 批量删除角色 API
- 创建或更新用户
- 创建服务帐户令牌
- 委托 PKI 身份验证
- 删除应用程序权限
- 删除角色映射
- 删除角色
- 删除服务帐户令牌
- 删除用户
- 禁用用户
- 启用用户
- 注册 Kibana
- 注册节点
- 获取 API 密钥信息
- 获取应用程序权限
- 获取内置权限
- 获取角色映射
- 获取角色
- 查询角色
- 获取服务帐户
- 获取服务帐户凭据
- 获取安全设置
- 获取令牌
- 获取用户权限
- 获取用户
- 授予 API 密钥
- 具有权限
- 使 API 密钥失效
- 使令牌失效
- OpenID Connect 准备身份验证
- OpenID Connect 身份验证
- OpenID Connect 注销
- 查询 API 密钥信息
- 查询用户
- 更新 API 密钥
- 更新安全设置
- 批量更新 API 密钥
- SAML 准备身份验证
- SAML 身份验证
- SAML 注销
- SAML 失效
- SAML 完成注销
- SAML 服务提供商元数据
- SSL 证书
- 激活用户配置文件
- 禁用用户配置文件
- 启用用户配置文件
- 获取用户配置文件
- 建议用户配置文件
- 更新用户配置文件数据
- 具有用户配置文件权限
- 创建跨集群 API 密钥
- 更新跨集群 API 密钥
- 快照和还原 API
- 快照生命周期管理 API
- SQL API
- 同义词 API
- 文本结构 API
- 转换 API
- 使用情况 API
- Watcher API
- 定义
- 迁移指南
- 发行说明
- Elasticsearch 版本 8.17.0
- Elasticsearch 版本 8.16.1
- Elasticsearch 版本 8.16.0
- Elasticsearch 版本 8.15.5
- Elasticsearch 版本 8.15.4
- Elasticsearch 版本 8.15.3
- Elasticsearch 版本 8.15.2
- Elasticsearch 版本 8.15.1
- Elasticsearch 版本 8.15.0
- Elasticsearch 版本 8.14.3
- Elasticsearch 版本 8.14.2
- Elasticsearch 版本 8.14.1
- Elasticsearch 版本 8.14.0
- Elasticsearch 版本 8.13.4
- Elasticsearch 版本 8.13.3
- Elasticsearch 版本 8.13.2
- Elasticsearch 版本 8.13.1
- Elasticsearch 版本 8.13.0
- Elasticsearch 版本 8.12.2
- Elasticsearch 版本 8.12.1
- Elasticsearch 版本 8.12.0
- Elasticsearch 版本 8.11.4
- Elasticsearch 版本 8.11.3
- Elasticsearch 版本 8.11.2
- Elasticsearch 版本 8.11.1
- Elasticsearch 版本 8.11.0
- Elasticsearch 版本 8.10.4
- Elasticsearch 版本 8.10.3
- Elasticsearch 版本 8.10.2
- Elasticsearch 版本 8.10.1
- Elasticsearch 版本 8.10.0
- Elasticsearch 版本 8.9.2
- Elasticsearch 版本 8.9.1
- Elasticsearch 版本 8.9.0
- Elasticsearch 版本 8.8.2
- Elasticsearch 版本 8.8.1
- Elasticsearch 版本 8.8.0
- Elasticsearch 版本 8.7.1
- Elasticsearch 版本 8.7.0
- Elasticsearch 版本 8.6.2
- Elasticsearch 版本 8.6.1
- Elasticsearch 版本 8.6.0
- Elasticsearch 版本 8.5.3
- Elasticsearch 版本 8.5.2
- Elasticsearch 版本 8.5.1
- Elasticsearch 版本 8.5.0
- Elasticsearch 版本 8.4.3
- Elasticsearch 版本 8.4.2
- Elasticsearch 版本 8.4.1
- Elasticsearch 版本 8.4.0
- Elasticsearch 版本 8.3.3
- Elasticsearch 版本 8.3.2
- Elasticsearch 版本 8.3.1
- Elasticsearch 版本 8.3.0
- Elasticsearch 版本 8.2.3
- Elasticsearch 版本 8.2.2
- Elasticsearch 版本 8.2.1
- Elasticsearch 版本 8.2.0
- Elasticsearch 版本 8.1.3
- Elasticsearch 版本 8.1.2
- Elasticsearch 版本 8.1.1
- Elasticsearch 版本 8.1.0
- Elasticsearch 版本 8.0.1
- Elasticsearch 版本 8.0.0
- Elasticsearch 版本 8.0.0-rc2
- Elasticsearch 版本 8.0.0-rc1
- Elasticsearch 版本 8.0.0-beta1
- Elasticsearch 版本 8.0.0-alpha2
- Elasticsearch 版本 8.0.0-alpha1
- 依赖项和版本
获取异常检测任务 API
编辑获取异常检测任务 API
编辑检索异常检测任务的配置信息。
请求
编辑GET _ml/anomaly_detectors/<job_id>
GET _ml/anomaly_detectors/<job_id>,<job_id>
GET _ml/anomaly_detectors/
GET _ml/anomaly_detectors/_all
先决条件
编辑需要 monitor_ml
集群权限。此权限包含在 machine_learning_user
内置角色中。
描述
编辑此 API 最多返回 10,000 个任务。
路径参数
编辑-
<job_id>
- (可选,字符串)异常检测任务的标识符。它可以是任务标识符、组名称或通配符表达式。您可以使用组名称、逗号分隔的任务列表或通配符表达式,在单个 API 请求中获取多个异常检测任务的信息。您可以使用
_all
、指定*
作为任务标识符或省略标识符来获取所有异常检测任务的信息。
查询参数
编辑-
allow_no_match
-
(可选,布尔值)指定当请求时要执行的操作
- 包含通配符表达式,且没有匹配的任务。
- 包含
_all
字符串或没有标识符,并且没有匹配项。 - 包含通配符表达式,且只有部分匹配项。
默认值为
true
,当没有匹配项时返回一个空的jobs
数组,当有部分匹配项时返回结果子集。如果此参数为false
,则当没有匹配项或只有部分匹配项时,请求将返回404
状态代码。 -
exclude_generated
- (可选,布尔值)指示是否应从检索到的配置中删除某些字段。这允许配置采用可接受的格式进行检索,然后添加到另一个集群。默认为 false。
响应体
编辑该 API 返回异常检测任务资源的数组。有关属性的完整列表,请参阅创建异常检测任务 API。
-
blocked
-
(对象)如果存在,则解释任务在作业上执行,阻止其打开。
blocked
的属性-
reason
- (字符串)阻止任务的原因。值可能是
delete
、reset
、revert
。每个值表示正在执行相应的操作。 -
task_id
- (字符串)阻止操作的任务 ID。您可以使用任务管理 API 来监视进度。
-
-
create_time
- (字符串)创建任务的时间。例如,
1491007356077
。此属性是信息性的;您无法更改其值。 -
datafeed_config
-
(对象)为当前异常检测任务配置的数据馈送。
datafeed_config
的属性-
authorization
-
(可选,对象)数据馈送用于运行其查询的安全权限。如果在最近一次更新数据馈送时禁用了 Elastic Stack 安全功能,则会省略此属性。
authorization
的属性-
api_key
-
(对象)如果 API 密钥用于最近一次更新数据馈送,则其名称和标识符将列在响应中。
api_key
的属性-
id
- (字符串)API 密钥的标识符。
-
name
- (字符串)API 密钥的名称。
-
-
roles
- (字符串数组)如果用户 ID 用于最近一次更新数据馈送,则响应中将列出更新时的角色。
-
service_account
- (字符串)如果服务帐户用于最近一次更新数据馈送,则响应中将列出帐户名称。
-
-
datafeed_id
- (可选,字符串)唯一标识数据馈送的数字字符串。此标识符可以包含小写字母数字字符 (a-z 和 0-9)、连字符和下划线。它必须以字母数字字符开头和结尾。
-
aggregations
- (可选,对象)如果设置,则数据馈送将执行聚合搜索。对聚合的支持是有限的,应仅与低基数数据一起使用。有关详细信息,请参阅聚合数据以加快性能。
-
chunking_config
-
(可选,对象)数据馈送可能需要在较长的时间段(几个月或几年)内进行搜索。此搜索分为时间块,以确保管理 Elasticsearch 的负载。分块配置控制如何计算这些时间块的大小,并且是一个高级配置选项。
chunking_config
的属性-
mode
-
(字符串)有三种可用模式
-
auto
:动态计算块大小。这是默认值,当数据馈送不使用聚合时建议使用此值。 -
manual
:根据指定的time_span
应用分块。当数据馈送使用聚合时,请使用此模式。 -
off
:不应用分块。
-
-
time_span
- (时间单位)每次搜索将查询的时间跨度。仅当模式设置为
manual
时,此设置才适用。例如:3h
。
-
-
delayed_data_check_config
-
(可选,对象)指定数据馈送是否检查缺少的数据以及窗口大小。例如:
{"enabled": true, "check_window": "1h"}
。数据馈送可以选择搜索已读取的索引,以确定是否随后已将任何数据添加到索引中。如果找到缺少的数据,则很好地表明
query_delay
选项设置得太低,并且数据是在数据馈送传递了该时间点之后进行索引的。请参阅处理延迟数据。此检查仅在实时数据馈送上运行。
delayed_data_check_config
的属性-
check_window
- (时间单位)搜索后期数据的时间窗口。此时间窗口以最新的最终存储桶结束。它默认为
null
,这将导致在实时数据馈送运行时计算适当的check_window
。特别是,默认的check_window
跨度计算基于2h
或8 * bucket_span
的最大值。 -
enabled
- (布尔值)指定数据馈送是否定期检查延迟数据。默认为
true
。
-
-
frequency
- (可选,时间单位)数据馈送实时运行时进行计划查询的间隔。默认值是短存储桶跨度的存储桶跨度,或者是较长存储桶跨度的存储桶跨度的合理分数。例如:
150s
。当frequency
短于存储桶跨度时,将写入最后一个(部分)存储桶的临时结果,然后最终被完整的存储桶结果覆盖。如果数据馈送使用聚合,则此值必须可被日期直方图聚合的间隔整除。 -
indices
-
(必需,数组)索引名称的数组。支持通配符。例如:
["it_ops_metrics", "server*"]
。如果任何索引在远程集群中,则机器学习节点需要具有
remote_cluster_client
角色。 -
indices_options
-
(可选,对象)指定在搜索期间使用的索引扩展选项。
例如
{ "expand_wildcards": ["all"], "ignore_unavailable": true, "allow_no_indices": "false", "ignore_throttled": true }
有关这些选项的详细信息,请参阅多目标语法。
-
job_id
- (必需,字符串)异常检测任务的标识符。
-
max_empty_searches
- (可选,整数)如果实时数据馈送从未看到任何数据(包括在任何初始训练期间),则在返回没有文档的多次实时搜索后,它将自动停止并关闭其关联的任务。换句话说,它将在实时操作的
frequency
乘以max_empty_searches
后停止。如果未设置,则没有结束时间的未看到数据的馈送将保持启动状态,直到显式停止为止。默认情况下,此设置未设置。 -
query
- (可选,对象)Elasticsearch 查询域特定语言 (DSL)。此值对应于 Elasticsearch 搜索 POST 主体中的查询对象。可以使用 Elasticsearch 支持的所有选项,因为此对象会逐字传递给 Elasticsearch。默认情况下,此属性具有以下值:
{"match_all": {"boost": 1}}
。 -
query_delay
- (可选,时间单位)查询数据的时间落后于实时的时间(以秒为单位)。例如,如果上午 10:04 的数据可能要到上午 10:06 才能在 Elasticsearch 中搜索到,请将此属性设置为 120 秒。默认值在
60s
和120s
之间随机选择。当在同一节点上运行多个任务时,这种随机性可以提高查询性能。有关详细信息,请参阅处理延迟数据。 -
runtime_mappings
-
(可选,对象)指定数据馈送搜索的运行时字段。
例如
{ "day_of_week": { "type": "keyword", "script": { "source": "emit(doc['@timestamp'].value.dayOfWeekEnum.getDisplayName(TextStyle.FULL, Locale.ENGLISH))" } } }
-
script_fields
- (可选,对象)指定评估自定义表达式并向数据馈送返回脚本字段的脚本。任务中的检测器配置对象可以包含使用这些脚本字段的函数。有关详细信息,请参阅使用脚本字段转换数据和脚本字段。
-
scroll_size
- (可选,无符号整数)当数据源不使用聚合时,Elasticsearch 搜索中使用的
size
参数。默认值为1000
。最大值为index.max_result_window
的值,默认情况下为 10,000。
-
-
finished_time
- (字符串)如果作业已关闭或失败,则此为作业完成的时间,否则为
null
。此属性仅供参考;您不能更改其值。 -
job_type
- (字符串)保留供将来使用,当前设置为
anomaly_detector
。 -
job_version
- (字符串)创建作业时使用的机器学习配置版本号。
从 Elasticsearch 8.10.0 开始,使用新的版本号来跟踪机器学习插件中的配置和状态更改。这个新的版本号与产品版本解耦,并将独立递增。job_version
值代表新的版本号。
-
model_snapshot_id
- (字符串)唯一标识模型快照的数字字符串。例如,
1575402236000
。
响应代码
编辑-
404
(缺少资源) - 如果
allow_no_match
为false
,则此代码表示没有与请求匹配的资源,或者请求仅部分匹配。
示例
编辑resp = client.ml.get_jobs( job_id="high_sum_total_sales", ) print(resp)
response = client.ml.get_jobs( job_id: 'high_sum_total_sales' ) puts response
const response = await client.ml.getJobs({ job_id: "high_sum_total_sales", }); console.log(response);
GET _ml/anomaly_detectors/high_sum_total_sales
API 返回以下结果
{ "count": 1, "jobs": [ { "job_id" : "high_sum_total_sales", "job_type" : "anomaly_detector", "job_version" : "8.4.0", "create_time" : 1655852735889, "finished_time" : 1655852745980, "model_snapshot_id" : "1575402237", "custom_settings" : { "created_by" : "ml-module-sample", ... }, "datafeed_config" : { "datafeed_id" : "datafeed-high_sum_total_sales", "job_id" : "high_sum_total_sales", "authorization" : { "roles" : [ "superuser" ] }, "query_delay" : "93169ms", "chunking_config" : { "mode" : "auto" }, "indices_options" : { "expand_wildcards" : [ "open" ], "ignore_unavailable" : false, "allow_no_indices" : true, "ignore_throttled" : true }, "query" : { "bool" : { "filter" : [ { "term" : { "event.dataset" : "sample_ecommerce" } } ] } }, "indices" : [ "kibana_sample_data_ecommerce" ], "scroll_size" : 1000, "delayed_data_check_config" : { "enabled" : true } }, "groups" : [ "kibana_sample_data", "kibana_sample_ecommerce" ], "description" : "Find customers spending an unusually high amount in an hour", "analysis_config" : { "bucket_span" : "1h", "detectors" : [ { "detector_description" : "High total sales", "function" : "high_sum", "field_name" : "taxful_total_price", "over_field_name" : "customer_full_name.keyword", "detector_index" : 0 } ], "influencers" : [ "customer_full_name.keyword", "category.keyword" ], "model_prune_window": "30d" }, "analysis_limits" : { "model_memory_limit" : "13mb", "categorization_examples_limit" : 4 }, "data_description" : { "time_field" : "order_date", "time_format" : "epoch_ms" }, "model_plot_config" : { "enabled" : true, "annotations_enabled" : true }, "model_snapshot_retention_days" : 10, "daily_model_snapshot_retention_after_days" : 1, "results_index_name" : "shared", "allow_lazy_open" : false } ] }