知识卡片
分索引的历史边界
原书案例发现,在当时的Elasticsearch版本和硬件上,持续增加单索引Shard会提高I/O压力且使扩容难以控制,于是按类目或城市拆成多个索引,并用多索引查询组合结果。书中“单节点最好不多于3个Shard”是当时文档与部署经验,不是当前版本的通用上限。
分索引可以缩小单个索引的规模,也会增加集群状态、查询扇出和运维成本。是否拆分应依据当前版本、分片大小、heap、查询并发、恢复时间和业务隔离需求压测决定;不能把固定Shard数量当作规则。该思路与[[查询路由的历史经验]]都要求按业务访问模式控制查询范围。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高可用架构(第1卷)》第2章《高可用架构原理与分布式实践》"2.8 亿级规模的Elasticsearch优化实战"节,"2.8.2 查询性能(Query Performance)"(源文件:_epub-src/OEBPS/Text/Chapter2_8_3.xhtml)
- 结论依据:原文说明"更多的shard会带来额外的索引压力,即I/O压力。因此我们选择了分索引……Elastic官方文档建议:一个Node最好不要多于3个Shard……若是'more Shards',除增加更多的机器外,实际是没办法做到这一点的",直接支撑本卡片结论。
- 原始内容:在实践过程中,更多的shard会带来额外的索引压力,即I/O压力。因此我们选择了分索引……Elastic官方文档建议:一个Node最好不要多于3个Shard。若是"more Shards",除增加更多的机器外,实际是没办法做到这一点的。