← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 2580.b.1.c.1.h.2.b.1.a.2.a.10

查询反馈校正频次与桶高

理解等级:高级

范围反馈可用实际计数与估计计数之比修正桶高;等值反馈则调整 Sketch 中相关计数,使该查询的估计贴近观察。更新是在已有摘要上校正,仍受哈希碰撞、反馈范围和新旧数据差异约束。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 3 处

    参考来源

    - 位置:《TiDB源码阅读系列文章》第12章《TiDB 源码阅读系列文章(十二)统计信息(上)》(来源项目:book-sources;源文件:extracted/TiDB源码阅读系列文章/_epub-src/OEBPS/Text/TiDB 源码阅读系列文章(十二)统计信息(上).html;阅读段落 29,31,40;均为书中版本) - 结论依据:原文对查询反馈校正频次与桶高给出上述机制或边界;本卡把已读说明整理为可独立理解的解释。 - 原始内容:在 2.0 版本中,TiDB 引入了动态更新机制(2.0 版本默认没有打开, 2.1-beta 版本中已经默认打开),可以根据查询的结果去动态调整统计信息。对于直方图,需要调整桶高和桶的边界;对于 CM Sketch,需要调整计数数组,使得估计值和查询的结果相等。 …… 在范围查询的时候,涉及的桶都有可能对最终的结果贡献一些误差。因此,一种更新的方法便是假定所有桶贡献的误差都是均匀的,即如果最终估计的结果为 E,实际的结果为 R,某一个桶的估计结果为 b = 桶高 h * 覆盖比例 r,那么就可以将这个桶的桶高调整为 (b / r) * (R / E) = …… CM Sketch 的更新比较简单,对于某一个等值查询的反馈结果 x,其估计值是 y,那么我们只需要将这个值涉及到的所有点加上 c = x-y。