知识卡片

普通读书笔记卡 · 4293.a

小集群优先查询

理解等级:高级

按时间把索引切成周级、两月级和全量集群后,百姓网让查询先访问较小的近期集群,数据不足时再查询Full集群,以减少大集群压力。对多数只需近期结果的请求,这是一条“先小后大”的分层路径;适用前提是业务查询确实偏向近期数据,并能定义何时算“结果不足”。

原文还描述了当时系统的总数策略:默认用Mini集群命中数的倍数作估算,需要准确Total Count时再以size: 0访问Full集群。这里的“Count API(设置size为0)”是Elasticsearch 1.x/2.x升级案例中的历史用语,不应直接当作现代版本API指南。可复用的原则是把近似总数与精确总数分开定价,并按当前版本验证查询接口和统计语义。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《高可用架构(第1卷)》第6章《大数据与数据库》"6.3 百姓网Elasticsearch2.x升级之路"节,"6.3.4 百姓之道"(源文件:_epub-src/OEBPS/Text/Chapter6_3_5.xhtml) - 结论依据:原文说明"使用时间划分集群后,还有一个好处,我们可以用二月的信息的集群来作为较小集群,让查询优先访问这个集群,当数据满足条件后,就不需要查询Full集群;数据不足则继续查询Full集群……若查询了较小集群,并且需要准确的Total Count(默认提供一个Mini集群10倍的数字),可以进一步使用Count API(设置size:0)去访问Full集群",直接支撑本卡片结论。 - 原始内容:使用时间划分集群后,还有一个好处,我们可以用二月的信息的集群来作为较小集群,让查询优先访问这个集群,当数据满足条件后,就不需要查询Full集群;数据不足则继续查询Full集群,进一步降低大集群的访问压力。