- Elasticsearch 指南其他版本
- 8.17 中的新功能
- Elasticsearch 基础
- 快速入门
- 设置 Elasticsearch
- 升级 Elasticsearch
- 索引模块
- 映射
- 文本分析
- 索引模板
- 数据流
- 摄取管道
- 别名
- 搜索您的数据
- 重新排名
- 查询 DSL
- 聚合
- 地理空间分析
- 连接器
- EQL
- ES|QL
- SQL
- 脚本
- 数据管理
- 自动缩放
- 监视集群
- 汇总或转换数据
- 设置高可用性集群
- 快照和还原
- 保护 Elastic Stack 的安全
- Watcher
- 命令行工具
- elasticsearch-certgen
- elasticsearch-certutil
- elasticsearch-create-enrollment-token
- elasticsearch-croneval
- elasticsearch-keystore
- elasticsearch-node
- elasticsearch-reconfigure-node
- elasticsearch-reset-password
- elasticsearch-saml-metadata
- elasticsearch-service-tokens
- elasticsearch-setup-passwords
- elasticsearch-shard
- elasticsearch-syskeygen
- elasticsearch-users
- 优化
- 故障排除
- 修复常见的集群问题
- 诊断未分配的分片
- 向系统中添加丢失的层
- 允许 Elasticsearch 在系统中分配数据
- 允许 Elasticsearch 分配索引
- 索引将索引分配过滤器与数据层节点角色混合,以在数据层之间移动
- 没有足够的节点来分配所有分片副本
- 单个节点上索引的分片总数已超过
- 每个节点的分片总数已达到
- 故障排除损坏
- 修复磁盘空间不足的数据节点
- 修复磁盘空间不足的主节点
- 修复磁盘空间不足的其他角色节点
- 启动索引生命周期管理
- 启动快照生命周期管理
- 从快照恢复
- 故障排除损坏的存储库
- 解决重复的快照策略失败问题
- 故障排除不稳定的集群
- 故障排除发现
- 故障排除监控
- 故障排除转换
- 故障排除 Watcher
- 故障排除搜索
- 故障排除分片容量健康问题
- 故障排除不平衡的集群
- 捕获诊断信息
- REST API
- API 约定
- 通用选项
- REST API 兼容性
- 自动缩放 API
- 行为分析 API
- 紧凑和对齐文本 (CAT) API
- 集群 API
- 跨集群复制 API
- 连接器 API
- 数据流 API
- 文档 API
- 丰富 API
- EQL API
- ES|QL API
- 功能 API
- Fleet API
- 图表探索 API
- 索引 API
- 别名是否存在
- 别名
- 分析
- 分析索引磁盘使用量
- 清除缓存
- 克隆索引
- 关闭索引
- 创建索引
- 创建或更新别名
- 创建或更新组件模板
- 创建或更新索引模板
- 创建或更新索引模板(旧版)
- 删除组件模板
- 删除悬挂索引
- 删除别名
- 删除索引
- 删除索引模板
- 删除索引模板(旧版)
- 存在
- 字段使用情况统计信息
- 刷新
- 强制合并
- 获取别名
- 获取组件模板
- 获取字段映射
- 获取索引
- 获取索引设置
- 获取索引模板
- 获取索引模板(旧版)
- 获取映射
- 导入悬挂索引
- 索引恢复
- 索引段
- 索引分片存储
- 索引统计信息
- 索引模板是否存在(旧版)
- 列出悬挂索引
- 打开索引
- 刷新
- 解析索引
- 解析集群
- 翻转
- 收缩索引
- 模拟索引
- 模拟模板
- 拆分索引
- 解冻索引
- 更新索引设置
- 更新映射
- 索引生命周期管理 API
- 推理 API
- 信息 API
- 摄取 API
- 许可 API
- Logstash API
- 机器学习 API
- 机器学习异常检测 API
- 机器学习数据帧分析 API
- 机器学习训练模型 API
- 迁移 API
- 节点生命周期 API
- 查询规则 API
- 重新加载搜索分析器 API
- 存储库计量 API
- 汇总 API
- 根 API
- 脚本 API
- 搜索 API
- 搜索应用程序 API
- 可搜索快照 API
- 安全 API
- 身份验证
- 更改密码
- 清除缓存
- 清除角色缓存
- 清除权限缓存
- 清除 API 密钥缓存
- 清除服务帐户令牌缓存
- 创建 API 密钥
- 创建或更新应用程序权限
- 创建或更新角色映射
- 创建或更新角色
- 批量创建或更新角色 API
- 批量删除角色 API
- 创建或更新用户
- 创建服务帐户令牌
- 委托 PKI 身份验证
- 删除应用程序权限
- 删除角色映射
- 删除角色
- 删除服务帐户令牌
- 删除用户
- 禁用用户
- 启用用户
- 注册 Kibana
- 注册节点
- 获取 API 密钥信息
- 获取应用程序权限
- 获取内置权限
- 获取角色映射
- 获取角色
- 查询角色
- 获取服务帐户
- 获取服务帐户凭据
- 获取安全设置
- 获取令牌
- 获取用户权限
- 获取用户
- 授予 API 密钥
- 具有权限
- 使 API 密钥失效
- 使令牌失效
- OpenID Connect 准备身份验证
- OpenID Connect 身份验证
- OpenID Connect 注销
- 查询 API 密钥信息
- 查询用户
- 更新 API 密钥
- 更新安全设置
- 批量更新 API 密钥
- SAML 准备身份验证
- SAML 身份验证
- SAML 注销
- SAML 失效
- SAML 完成注销
- SAML 服务提供商元数据
- SSL 证书
- 激活用户配置文件
- 禁用用户配置文件
- 启用用户配置文件
- 获取用户配置文件
- 建议用户配置文件
- 更新用户配置文件数据
- 具有用户配置文件权限
- 创建跨集群 API 密钥
- 更新跨集群 API 密钥
- 快照和还原 API
- 快照生命周期管理 API
- SQL API
- 同义词 API
- 文本结构 API
- 转换 API
- 使用情况 API
- Watcher API
- 定义
- 迁移指南
- 发行说明
- Elasticsearch 版本 8.17.0
- Elasticsearch 版本 8.16.1
- Elasticsearch 版本 8.16.0
- Elasticsearch 版本 8.15.5
- Elasticsearch 版本 8.15.4
- Elasticsearch 版本 8.15.3
- Elasticsearch 版本 8.15.2
- Elasticsearch 版本 8.15.1
- Elasticsearch 版本 8.15.0
- Elasticsearch 版本 8.14.3
- Elasticsearch 版本 8.14.2
- Elasticsearch 版本 8.14.1
- Elasticsearch 版本 8.14.0
- Elasticsearch 版本 8.13.4
- Elasticsearch 版本 8.13.3
- Elasticsearch 版本 8.13.2
- Elasticsearch 版本 8.13.1
- Elasticsearch 版本 8.13.0
- Elasticsearch 版本 8.12.2
- Elasticsearch 版本 8.12.1
- Elasticsearch 版本 8.12.0
- Elasticsearch 版本 8.11.4
- Elasticsearch 版本 8.11.3
- Elasticsearch 版本 8.11.2
- Elasticsearch 版本 8.11.1
- Elasticsearch 版本 8.11.0
- Elasticsearch 版本 8.10.4
- Elasticsearch 版本 8.10.3
- Elasticsearch 版本 8.10.2
- Elasticsearch 版本 8.10.1
- Elasticsearch 版本 8.10.0
- Elasticsearch 版本 8.9.2
- Elasticsearch 版本 8.9.1
- Elasticsearch 版本 8.9.0
- Elasticsearch 版本 8.8.2
- Elasticsearch 版本 8.8.1
- Elasticsearch 版本 8.8.0
- Elasticsearch 版本 8.7.1
- Elasticsearch 版本 8.7.0
- Elasticsearch 版本 8.6.2
- Elasticsearch 版本 8.6.1
- Elasticsearch 版本 8.6.0
- Elasticsearch 版本 8.5.3
- Elasticsearch 版本 8.5.2
- Elasticsearch 版本 8.5.1
- Elasticsearch 版本 8.5.0
- Elasticsearch 版本 8.4.3
- Elasticsearch 版本 8.4.2
- Elasticsearch 版本 8.4.1
- Elasticsearch 版本 8.4.0
- Elasticsearch 版本 8.3.3
- Elasticsearch 版本 8.3.2
- Elasticsearch 版本 8.3.1
- Elasticsearch 版本 8.3.0
- Elasticsearch 版本 8.2.3
- Elasticsearch 版本 8.2.2
- Elasticsearch 版本 8.2.1
- Elasticsearch 版本 8.2.0
- Elasticsearch 版本 8.1.3
- Elasticsearch 版本 8.1.2
- Elasticsearch 版本 8.1.1
- Elasticsearch 版本 8.1.0
- Elasticsearch 版本 8.0.1
- Elasticsearch 版本 8.0.0
- Elasticsearch 版本 8.0.0-rc2
- Elasticsearch 版本 8.0.0-rc1
- Elasticsearch 版本 8.0.0-beta1
- Elasticsearch 版本 8.0.0-alpha2
- Elasticsearch 版本 8.0.0-alpha1
- 依赖项和版本
小型集群的弹性
编辑小型集群的弹性
编辑在较小的集群中,最重要的是对单节点故障具有弹性。本节提供了一些指导,以使您的集群尽可能对单个节点的故障具有弹性。
单节点集群
编辑如果您的集群由一个节点组成,那么该单个节点必须完成所有工作。为了适应这种情况,Elasticsearch 默认情况下会为节点分配所有角色。
单节点集群不具备弹性。如果该节点发生故障,则集群将停止工作。由于单节点集群中没有副本,因此您无法冗余地存储数据。但是,默认情况下,至少需要一个副本才能使 green
集群健康状态。为了确保您的集群可以报告 green
状态,请通过在每个索引上将 index.number_of_replicas
设置为 0
来覆盖默认值。
如果节点发生故障,您可能需要从快照还原任何丢失索引的旧副本。
由于它们对任何故障都不具备弹性,因此我们不建议在生产环境中使用单节点集群。
双节点集群
编辑如果您有两个节点,我们建议它们都为数据节点。您还应通过在每个非 可搜索快照索引的索引上将 index.number_of_replicas
设置为 1
,来确保每个分片都冗余地存储在两个节点上。这是默认行为,但可能会被索引模板覆盖。自动扩展副本也可以实现相同的效果,但在这样的小型集群中没有必要使用此功能。
我们建议您将两个节点中的一个设置为符合主节点条件的。这意味着您可以确定哪个节点是集群的选举主节点。该集群可以容忍另一个不符合主节点条件的节点的丢失。如果您将两个节点都设置为符合主节点条件,则需要两个节点才能进行主节点选举。由于如果任何一个节点不可用,选举将失败,因此您的集群无法可靠地容忍任何节点的丢失。
默认情况下,每个节点都分配有所有角色。我们建议您为两个节点分配除主节点资格之外的所有其他角色。如果一个节点发生故障,另一个节点可以处理其任务。
您应避免仅将客户端请求发送到您的其中一个节点。如果您这样做,并且此节点发生故障,则即使剩余的节点本身是一个健康的集群,此类请求也不会收到响应。理想情况下,您应该在两个节点之间平衡您的客户端请求。做到这一点的不错方法是在配置客户端以连接到您的集群时指定两个节点的地址。或者,您可以使用弹性负载均衡器来平衡集群中节点之间的客户端请求。
由于它对故障不具备弹性,因此我们不建议在生产环境中部署双节点集群。
带有仲裁器的双节点集群
编辑由于主节点选举是基于多数的,因此上述描述的双节点集群可以容忍其中一个节点的丢失,但不能容忍另一个节点的丢失。您无法配置双节点集群,使其可以容忍任何节点的丢失,因为这在理论上是不可能的。您可能会认为,如果任何一个节点发生故障,则 Elasticsearch 可以选举剩余节点为主节点,但是不可能区分远程节点的故障和节点之间仅仅是连接丢失。如果两个节点都能够运行独立的选举,则连接丢失会导致脑裂问题,从而导致数据丢失。Elasticsearch 通过不选举任何一个节点为主节点来避免这种情况并保护您的数据,直到该节点可以确定它具有最新的集群状态并且集群中没有其他主节点。这可能会导致集群在连接恢复之前没有主节点。
您可以通过添加第三个节点并使所有三个节点都符合主节点条件来解决此问题。 主节点选举只需要三个符合主节点条件的节点中的两个。这意味着该集群可以容忍任何单个节点的丢失。当两个原始节点彼此断开连接时,第三个节点充当仲裁器。您可以通过将其设为专用的仅投票的主节点资格节点(也称为专用仲裁器)来降低此额外节点的资源需求。由于它没有其他角色,因此专用仲裁器不需要像其他两个节点那样强大。它不会执行任何搜索,也不会协调任何客户端请求,并且不能被选举为集群的主节点。
两个原始节点不应是仅投票的主节点资格节点,因为一个具有弹性的集群至少需要三个符合主节点条件的节点,其中至少两个不是仅投票的主节点资格节点。如果您的三个节点中的两个是仅投票的主节点资格节点,那么当选的主节点必须是第三个节点。然后,此节点将成为单点故障。
我们建议为两个非仲裁器节点分配所有其他角色。通过确保集群中的任何任务都可以由任何一个节点处理,从而创建冗余。
您不应将任何客户端请求发送到专用仲裁器节点。您还应避免仅将客户端请求发送到其他两个节点中的一个。如果您这样做,并且此节点发生故障,则任何请求都不会收到响应,即使剩余节点构成一个健康的集群。理想情况下,您应该在两个非仲裁器节点之间平衡您的客户端请求。您可以通过在配置客户端以连接到集群时指定两个节点的地址来做到这一点。或者,您可以使用弹性负载均衡器来平衡集群中相应节点之间的客户端请求。Elastic Cloud 服务提供了这样的负载均衡器。
带有附加仲裁器节点的双节点集群是适合生产部署的最小可行集群。
三节点集群
编辑如果您有三个节点,我们建议它们都为 数据节点,并且每个非可搜索快照索引的索引都应至少有一个副本。默认情况下,节点是数据节点。您可能更希望某些索引有两个副本,以便每个节点都具有这些索引中每个分片的副本。您还应将每个节点配置为符合主节点条件,以便它们中的任意两个都可以在无需与第三个节点通信的情况下进行主节点选举。默认情况下,节点符合主节点条件。此集群将能够容忍任何单个节点的丢失。
您应避免仅将客户端请求发送到您的其中一个节点。如果您这样做,并且此节点发生故障,则即使剩余的两个节点构成一个健康的集群,任何请求也不会收到响应。理想情况下,您应该在所有三个节点之间平衡您的客户端请求。您可以通过在配置客户端以连接到您的集群时指定多个节点的地址来做到这一点。或者,您可以使用弹性负载均衡器来平衡集群之间的客户端请求。Elastic Cloud 服务提供了这样的负载均衡器。
具有三个以上节点的集群
编辑一旦您的集群增长到三个以上的节点,您就可以开始根据其职责来专门化这些节点,从而使您可以根据需要独立地扩展其资源。您可以拥有任意数量的数据节点,摄取节点,机器学习节点等,以支持您的工作负载。随着集群的增长,我们建议为每个角色使用专用节点。这使您可以独立扩展每个任务的资源。
但是,最好将集群中符合主节点条件的节点数限制为三个。主节点不像其他节点类型那样可以扩展,因为集群始终只选举其中一个作为集群的主节点。如果符合主节点条件的节点太多,则主节点选举可能需要更长的时间才能完成。在较大的集群中,我们建议您将某些节点配置为专用的符合主节点条件的节点,并避免将任何客户端请求发送到这些专用节点。如果符合主节点条件的节点不堪重负,而其他节点可以处理的不必要额外工作,则您的集群可能会变得不稳定。
您可以将其中一个符合主节点条件的节点配置为仅投票的节点,以便它永远不会被选举为主节点。例如,您可能有两个专用的主节点和第三个既是数据节点又是仅投票的符合主节点条件的节点。此第三个仅投票的节点将在主节点选举中充当仲裁器,但永远不会成为主节点本身。
总结
编辑只要满足以下条件,集群就可以弹性地容忍任何节点的丢失
- 集群健康状态为
green
。 - 至少有两个数据节点。
- 除了主分片之外,每个非可搜索快照索引的索引都至少具有每个分片的一个副本。
- 集群至少需要三个有资格成为主节点的节点,前提是其中至少有两个节点不是仅投票的有资格成为主节点的节点。
- 客户端配置为将请求发送到多个节点,或者配置为使用负载均衡器,该负载均衡器将请求均衡分配到一组合适的节点上。Elastic Cloud 服务提供了这样的负载均衡器。
On this page