ES中节点数量，分片数量，副本数量关系配比

淩亂°似流年 2022-10-30 13:22 33阅读 0赞

### ES中 节点数量，分片数量，副本数量关系配比 ###

*  问题
 *  节点数量
 *  主分片数量
 *   *  两个问题：
     *  解决：
 *  副本分片数量
 *   *  两个注意事项
 *  总结一下

# 问题 #

创建索引库的时候，要设计分片数量和副本数量，分片和副本是分布式搜索引擎的核心。

如何指定分片进行增删改查操作？

每个分片存储多少数据合适？

我们的文档存在哪个分片中？

为什么不可以修改主分片数量？

一次完整的ES查询流程怎么流的？

# 节点数量 #

节点数量很好说，你要是只有两三个服务器，还想啥自行车呢。

当然节点的数量还是有约束的。

一般情况下：

集群所有索引的副本最大值+1 <= 集群节点数量 <= 分片数量

这个公式举个例子:

你有十个节点，这十个节点中最大索引副本数量只能是9个，这九个副本在另外九个节点中，一个节点存一个，满足了master分配分片的原则。并且节点数量小于等于分片数量。

master分配分片原则参考链接：

[https://blog.csdn.net/numbbe/article/details/109826630][https_blog.csdn.net_numbbe_article_details_109826630]

一次完整的ES查询流程：

[https://blog.csdn.net/numbbe/article/details/110009685][https_blog.csdn.net_numbbe_article_details_110009685]

# 主分片数量 #

分片数量取决于你的集群规模以及你想达到的并发程度。

分片的大小一般在50GB以内。

## 两个问题： ##

为什么分片数量不可以实时修改？

我们的文档到底存放在哪个分片中？

## 解决： ##

文档存于分片不是随机存的，随机存的话，以后怎么查找啊，是有一定公式的。

索引数据的分片规则

`shard_num = hash(_routing) % num_primary_shards`

*  shard\_num： 分片位置，哪个分片。
 *  \_routing： id字段或者parent字段。
 *  num\_primary\_shards： 主分片数量。

可以看得出来，你的文档存在哪个分片跟主分片的数量有关系，如果你想改主分片数量就改主分片数量，那你的文档怎么说，你还能找到它吗。

# 副本分片数量 #

通俗的话来说：

一个副本可以容忍单点故障  
两个副本可以容忍两点故障

看起来仿佛副本数量越多，容错率就越高，需要注意一个东西，你的服务器是有容量的，就好比数据库中的索引一样，都知道索引是个好东西，但是它非常吃内存。

一般情况下，副本数量取决于你想实现多高的数据可用性以及你有多少可用存储空间。

## 两个注意事项 ##

1、相同分片的副本不会放在同一个节点。

比如这个分片有两个副本，这两个副本不可以在同一个节点。

2、ES禁止同一个分片的主分片和副本分片在同一个节点。

比如单节点ES，不允许有副本分片，有副本分片，则集群不健康。

# 总结一下 #

这三者之间是有关系的，三足鼎立，互相限制。

没有绝对的通用分配数量之说，根据自己业务进行压力测试，在不断的实践中找到合适的数量设计。

[https_blog.csdn.net_numbbe_article_details_109826630]: https://blog.csdn.net/numbbe/article/details/109826630
[https_blog.csdn.net_numbbe_article_details_110009685]: https://blog.csdn.net/numbbe/article/details/110009685

发表评论取消回复

表情：

评论列表（有 0 条评论，33人围观）

还没有评论，来说两句吧...

相关阅读

相关 Kafka：增加Topic主题副本数量

在生产环境当中，由于某个主题的重要等级需要提升，我们考虑增加副本。副本数的增加需要先制定计划，然后根据计划执行。 1）创建 topic test bin/kaf

朱雀/ 2024年03月25日 21:51/ 0 赞/ 127 阅读

相关常见数量关系分析

考点一相遇追及问题（一）直线型 1. 单次相遇：相距两地，同时出发，相向而行。 ![4cfe23189260d92a089065144dba7835.png][]

叁歲伎倆/ 2023年09月24日 22:32/ 0 赞/ 81 阅读

相关 Elasticsearch:选择恰当的分片数量和分片副本数量

最开始使用ElasticSearch时，一般都是创建一个索引，导入数据，然后发送查询命令检索数据。我们确信系统运行庚子，至少在最开始，数据量不大而且QPS(Query Per

淡淡的烟草味﹌/ 2023年02月25日 03:44/ 0 赞/ 56 阅读

相关 es统计所有数量的坑

最近在统计线上的数量时，会发现始终都是10000,觉得很奇怪。先来说一下场景，我使用的是7.2版本的es,需要统计所有数量。后来发现数量下面有个relati

快来打我*/ 2023年02月14日 10:20/ 0 赞/ 7 阅读

相关分类中计算数量

思路：把分类列表和图片列表全部搜出来。然后用一个方法把这两个数组整合。 / 开放图库分类 / pub

╰半橙微兮°/ 2022年12月13日 04:07/ 0 赞/ 217 阅读

相关 ES中节点数量，分片数量，副本数量关系配比

ES中节点数量，分片数量，副本数量关系配比问题节点数量主分片数量两个问题：解决：副本分片数量

淩亂°似流年/ 2022年10月30日 13:22/ 0 赞/ 34 阅读

相关 Kafka修改分区、副本数量

文章目录一、概述二、修改分区三、修改副本 1.指定Topic

Love The Way You Lie/ 2022年09月11日 05:22/ 0 赞/ 443 阅读

相关 java 数量/数量正则表达式

代码非常简单：数量若只有一位，则肯定不能为0，若超过一位数字，则第一位不能为0 public class t { public static void

水深无声/ 2022年03月11日 04:06/ 0 赞/ 287 阅读

相关 Java统计Xml节点数量

1.首先，统计方式分为两种，一个是通过java内置的xpath统计，另一个是通过StAX统计 2.xpath统计 1) 很遗憾的是，这种方式如果xml文件比较大的话会导致内

深碍√TFBOYSˉ_/ 2022年02月03日 15:17/ 0 赞/ 570 阅读

相关 Elasticsearch 7 : 设置索引副本数量和分片数量

分片数量至少为1，副本数量至少为 0 。默认分片数、副本数创建名为 movie 的索引： PUT movie Copy 注意，`PUT movie`

曾经终败给现在/ 2021年06月24日 13:58/ 0 赞/ 1393 阅读