- Elasticsearch 指南其他版本
- 8.17 中的新功能
- Elasticsearch 基础
- 快速入门
- 设置 Elasticsearch
- 升级 Elasticsearch
- 索引模块
- 映射
- 文本分析
- 索引模板
- 数据流
- 摄取管道
- 别名
- 搜索您的数据
- 重新排名
- 查询 DSL
- 聚合
- 地理空间分析
- 连接器
- EQL
- ES|QL
- SQL
- 脚本
- 数据管理
- 自动缩放
- 监视集群
- 汇总或转换数据
- 设置高可用性集群
- 快照和还原
- 保护 Elastic Stack 的安全
- Watcher
- 命令行工具
- elasticsearch-certgen
- elasticsearch-certutil
- elasticsearch-create-enrollment-token
- elasticsearch-croneval
- elasticsearch-keystore
- elasticsearch-node
- elasticsearch-reconfigure-node
- elasticsearch-reset-password
- elasticsearch-saml-metadata
- elasticsearch-service-tokens
- elasticsearch-setup-passwords
- elasticsearch-shard
- elasticsearch-syskeygen
- elasticsearch-users
- 优化
- 故障排除
- 修复常见的集群问题
- 诊断未分配的分片
- 向系统中添加丢失的层
- 允许 Elasticsearch 在系统中分配数据
- 允许 Elasticsearch 分配索引
- 索引将索引分配过滤器与数据层节点角色混合,以在数据层之间移动
- 没有足够的节点来分配所有分片副本
- 单个节点上索引的分片总数已超过
- 每个节点的分片总数已达到
- 故障排除损坏
- 修复磁盘空间不足的数据节点
- 修复磁盘空间不足的主节点
- 修复磁盘空间不足的其他角色节点
- 启动索引生命周期管理
- 启动快照生命周期管理
- 从快照恢复
- 故障排除损坏的存储库
- 解决重复的快照策略失败问题
- 故障排除不稳定的集群
- 故障排除发现
- 故障排除监控
- 故障排除转换
- 故障排除 Watcher
- 故障排除搜索
- 故障排除分片容量健康问题
- 故障排除不平衡的集群
- 捕获诊断信息
- REST API
- API 约定
- 通用选项
- REST API 兼容性
- 自动缩放 API
- 行为分析 API
- 紧凑和对齐文本 (CAT) API
- 集群 API
- 跨集群复制 API
- 连接器 API
- 数据流 API
- 文档 API
- 丰富 API
- EQL API
- ES|QL API
- 功能 API
- Fleet API
- 图表探索 API
- 索引 API
- 别名是否存在
- 别名
- 分析
- 分析索引磁盘使用量
- 清除缓存
- 克隆索引
- 关闭索引
- 创建索引
- 创建或更新别名
- 创建或更新组件模板
- 创建或更新索引模板
- 创建或更新索引模板(旧版)
- 删除组件模板
- 删除悬挂索引
- 删除别名
- 删除索引
- 删除索引模板
- 删除索引模板(旧版)
- 存在
- 字段使用情况统计信息
- 刷新
- 强制合并
- 获取别名
- 获取组件模板
- 获取字段映射
- 获取索引
- 获取索引设置
- 获取索引模板
- 获取索引模板(旧版)
- 获取映射
- 导入悬挂索引
- 索引恢复
- 索引段
- 索引分片存储
- 索引统计信息
- 索引模板是否存在(旧版)
- 列出悬挂索引
- 打开索引
- 刷新
- 解析索引
- 解析集群
- 翻转
- 收缩索引
- 模拟索引
- 模拟模板
- 拆分索引
- 解冻索引
- 更新索引设置
- 更新映射
- 索引生命周期管理 API
- 推理 API
- 信息 API
- 摄取 API
- 许可 API
- Logstash API
- 机器学习 API
- 机器学习异常检测 API
- 机器学习数据帧分析 API
- 机器学习训练模型 API
- 迁移 API
- 节点生命周期 API
- 查询规则 API
- 重新加载搜索分析器 API
- 存储库计量 API
- 汇总 API
- 根 API
- 脚本 API
- 搜索 API
- 搜索应用程序 API
- 可搜索快照 API
- 安全 API
- 身份验证
- 更改密码
- 清除缓存
- 清除角色缓存
- 清除权限缓存
- 清除 API 密钥缓存
- 清除服务帐户令牌缓存
- 创建 API 密钥
- 创建或更新应用程序权限
- 创建或更新角色映射
- 创建或更新角色
- 批量创建或更新角色 API
- 批量删除角色 API
- 创建或更新用户
- 创建服务帐户令牌
- 委托 PKI 身份验证
- 删除应用程序权限
- 删除角色映射
- 删除角色
- 删除服务帐户令牌
- 删除用户
- 禁用用户
- 启用用户
- 注册 Kibana
- 注册节点
- 获取 API 密钥信息
- 获取应用程序权限
- 获取内置权限
- 获取角色映射
- 获取角色
- 查询角色
- 获取服务帐户
- 获取服务帐户凭据
- 获取安全设置
- 获取令牌
- 获取用户权限
- 获取用户
- 授予 API 密钥
- 具有权限
- 使 API 密钥失效
- 使令牌失效
- OpenID Connect 准备身份验证
- OpenID Connect 身份验证
- OpenID Connect 注销
- 查询 API 密钥信息
- 查询用户
- 更新 API 密钥
- 更新安全设置
- 批量更新 API 密钥
- SAML 准备身份验证
- SAML 身份验证
- SAML 注销
- SAML 失效
- SAML 完成注销
- SAML 服务提供商元数据
- SSL 证书
- 激活用户配置文件
- 禁用用户配置文件
- 启用用户配置文件
- 获取用户配置文件
- 建议用户配置文件
- 更新用户配置文件数据
- 具有用户配置文件权限
- 创建跨集群 API 密钥
- 更新跨集群 API 密钥
- 快照和还原 API
- 快照生命周期管理 API
- SQL API
- 同义词 API
- 文本结构 API
- 转换 API
- 使用情况 API
- Watcher API
- 定义
- 迁移指南
- 发行说明
- Elasticsearch 版本 8.17.0
- Elasticsearch 版本 8.16.1
- Elasticsearch 版本 8.16.0
- Elasticsearch 版本 8.15.5
- Elasticsearch 版本 8.15.4
- Elasticsearch 版本 8.15.3
- Elasticsearch 版本 8.15.2
- Elasticsearch 版本 8.15.1
- Elasticsearch 版本 8.15.0
- Elasticsearch 版本 8.14.3
- Elasticsearch 版本 8.14.2
- Elasticsearch 版本 8.14.1
- Elasticsearch 版本 8.14.0
- Elasticsearch 版本 8.13.4
- Elasticsearch 版本 8.13.3
- Elasticsearch 版本 8.13.2
- Elasticsearch 版本 8.13.1
- Elasticsearch 版本 8.13.0
- Elasticsearch 版本 8.12.2
- Elasticsearch 版本 8.12.1
- Elasticsearch 版本 8.12.0
- Elasticsearch 版本 8.11.4
- Elasticsearch 版本 8.11.3
- Elasticsearch 版本 8.11.2
- Elasticsearch 版本 8.11.1
- Elasticsearch 版本 8.11.0
- Elasticsearch 版本 8.10.4
- Elasticsearch 版本 8.10.3
- Elasticsearch 版本 8.10.2
- Elasticsearch 版本 8.10.1
- Elasticsearch 版本 8.10.0
- Elasticsearch 版本 8.9.2
- Elasticsearch 版本 8.9.1
- Elasticsearch 版本 8.9.0
- Elasticsearch 版本 8.8.2
- Elasticsearch 版本 8.8.1
- Elasticsearch 版本 8.8.0
- Elasticsearch 版本 8.7.1
- Elasticsearch 版本 8.7.0
- Elasticsearch 版本 8.6.2
- Elasticsearch 版本 8.6.1
- Elasticsearch 版本 8.6.0
- Elasticsearch 版本 8.5.3
- Elasticsearch 版本 8.5.2
- Elasticsearch 版本 8.5.1
- Elasticsearch 版本 8.5.0
- Elasticsearch 版本 8.4.3
- Elasticsearch 版本 8.4.2
- Elasticsearch 版本 8.4.1
- Elasticsearch 版本 8.4.0
- Elasticsearch 版本 8.3.3
- Elasticsearch 版本 8.3.2
- Elasticsearch 版本 8.3.1
- Elasticsearch 版本 8.3.0
- Elasticsearch 版本 8.2.3
- Elasticsearch 版本 8.2.2
- Elasticsearch 版本 8.2.1
- Elasticsearch 版本 8.2.0
- Elasticsearch 版本 8.1.3
- Elasticsearch 版本 8.1.2
- Elasticsearch 版本 8.1.1
- Elasticsearch 版本 8.1.0
- Elasticsearch 版本 8.0.1
- Elasticsearch 版本 8.0.0
- Elasticsearch 版本 8.0.0-rc2
- Elasticsearch 版本 8.0.0-rc1
- Elasticsearch 版本 8.0.0-beta1
- Elasticsearch 版本 8.0.0-alpha2
- Elasticsearch 版本 8.0.0-alpha1
- 依赖项和版本
快照与恢复
编辑快照与恢复
编辑快照是正在运行的 Elasticsearch 集群的备份。您可以使用快照来
- 定期备份集群,无需停机
- 在删除或硬件故障后恢复数据
- 在集群之间传输数据
- 通过在冷数据层和冻结数据层中使用可搜索快照来降低存储成本
快照工作流程
编辑Elasticsearch 将快照存储在称为快照仓库的集群外存储位置。在您创建或恢复快照之前,必须在集群上注册快照仓库。Elasticsearch 支持多种带有云存储选项的仓库类型,包括
- AWS S3
- Google Cloud Storage (GCS)
- Microsoft Azure
注册快照仓库后,您可以使用快照生命周期管理 (SLM)来自动创建和管理快照。然后,您可以恢复快照以恢复或传输其数据。
快照内容
编辑默认情况下,集群的快照包含集群状态、所有常规数据流和所有常规索引。集群状态包括
您还可以仅创建集群中特定数据流或索引的快照。包含数据流或索引的快照会自动包含其别名。恢复快照时,您可以选择是否恢复这些别名。
快照不包含或备份
- 临时集群设置
- 注册的快照仓库
- 节点配置文件
- 安全配置文件
功能状态
编辑功能状态包含用于存储 Elastic 功能(如 Elasticsearch 安全或 Kibana)的配置、历史记录和其他数据的索引和数据流。
要检索功能状态列表,请使用功能 API。
功能状态通常包含一个或多个系统索引或系统数据流。它还可能包含功能使用的常规索引和数据流。例如,功能状态可能包含一个常规索引,其中包含功能的执行历史记录。将此历史记录存储在常规索引中可以让您更轻松地搜索它。
在 Elasticsearch 8.0 及更高版本中,功能状态是备份和恢复系统索引和系统数据流的唯一方法。
快照的工作原理
编辑快照会自动去重,以节省存储空间并降低网络传输成本。要备份索引,快照会复制索引的段并将其存储在快照仓库中。由于段是不可变的,因此快照只需要复制自仓库上次快照以来创建的任何新段。
每个快照在逻辑上也是独立的。当您删除快照时,Elasticsearch 只会删除该快照专用的段。Elasticsearch 不会删除仓库中其他快照使用的段。
快照和分片分配
编辑快照从索引的主分片复制段。当您启动快照时,Elasticsearch 会立即开始复制任何可用的主分片的段。如果分片正在启动或重新定位,Elasticsearch 将等待这些过程完成,然后再复制分片的段。如果一个或多个主分片不可用,则快照尝试将失败。
一旦快照开始复制分片的段,即使重新平衡或分片分配设置通常会触发重新分配,Elasticsearch 也不会将分片移动到另一个节点。Elasticsearch 仅会在快照完成复制分片数据后移动分片。
快照的开始时间和停止时间
编辑快照不代表集群在精确时间点时的状态。相反,每个快照都包含开始时间和结束时间。快照表示每个分片在两个时间之间的某个时间点的数据视图。
快照兼容性
编辑要将快照恢复到集群,快照、集群和任何恢复的索引的版本必须兼容。
快照版本兼容性
编辑您无法将快照恢复到早期版本的 Elasticsearch。例如,您无法将 7.6.0 中创建的快照恢复到运行 7.5.0 的集群。
索引兼容性
编辑您从快照恢复的任何索引也必须与当前集群的版本兼容。如果您尝试恢复在不兼容的版本中创建的索引,则恢复尝试将失败。
集群版本 |
|||||
索引创建版本 |
6.8 |
7.0–7.1 |
7.2–7.17 |
8.0–8.2 |
8.3-8.17 |
5.0–5.6 |
|||||
6.0–6.7 |
|||||
6.8 |
|||||
7.0–7.1 |
|||||
7.2–7.17 |
|||||
8.0–8.17 |
1. 支持归档索引。
您无法将索引恢复到早期版本的 Elasticsearch。例如,您无法将 7.6.0 中创建的索引恢复到运行 7.5.0 的集群。
兼容的快照可以包含在旧的不兼容版本中创建的索引。例如,7.17 集群的快照可以包含在 6.8 中创建的索引。除非您可以使用归档功能,否则将 6.8 索引恢复到 8.17 集群会失败。如果您在升级集群之前创建快照,请记住这一点。
作为一种解决方法,您可以首先将索引恢复到另一个运行与索引和当前集群都兼容的最新版本的 Elasticsearch 的集群。然后,您可以使用从远程重新索引在当前集群上重建索引。只有在启用索引的_source
时,才能从远程重新索引。
从远程重新索引可能比恢复快照需要更长的时间。在开始之前,请使用数据的子集测试从远程重新索引过程,以估计您的时间要求。
警告
编辑其他备份方法
编辑创建快照是备份集群的唯一可靠且受支持的方法。 您无法通过复制其节点的数据目录来备份 Elasticsearch 集群。没有支持的方法可以从文件系统级别的备份恢复任何数据。如果您尝试从此类备份恢复集群,它可能会因报告损坏或缺少文件或其他数据不一致而失败,或者它可能看似成功但默默丢失了一些数据。
集群节点的数据目录副本不能用作备份,因为它不是在单个时间点对其内容的统一表示。您无法通过在复制时关闭节点或通过采用原子文件系统级别快照来修复此问题,因为 Elasticsearch 具有跨整个集群的一致性要求。您必须使用内置的快照功能进行集群备份。
仓库内容
编辑请勿修改仓库中的任何内容或运行可能干扰其内容的进程。如果 Elasticsearch 以外的其他内容修改了仓库的内容,则将来的快照或恢复操作可能会失败,报告损坏或其他数据不一致,或者可能看似成功但默默丢失了一些数据。
但是,只要满足以下条件,您可以安全地从备份中恢复仓库:
- 在恢复仓库内容时,该仓库未在 Elasticsearch 中注册。
- 当您完成仓库恢复时,其内容与您进行备份时完全相同。
如果您不再需要仓库中的任何快照,请在从底层存储中删除其内容之前,从 Elasticsearch 中取消注册它。
此外,快照可能包含安全敏感信息,您可能希望将其存储在专用仓库中。