知识卡片
下推计算减少传输量
分布式计数可以先在存储节点筛选符合条件的数据并局部count,再把计数结果传回SQL层求和。这样传输的是较小中间结果,而非全部明细。下推能否获益,取决于过滤选择性、数据布局和执行计划;不能把局部聚合当成所有查询均可同样并行。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
当应用系统需要查询数据时,如执行Select count(*)from user where name=”TiDB”,会将该命令先发送给TiDB Server。TiDB Server会解析该SQL语句,将其转变为一个执行计划,将命令分发给每个TiKV节点。每个TiKV节点会先执行数据过滤与count(*)操作,最后将这些结果汇总给TiDB Server。
参考来源
- 位置:《架构真意企业级应用架构设计方法论与实践》第7章《分布式架构设计》,7.2.5 分布式数据库(源文件:../../../book-sources/extracted/架构真意企业级应用架构设计方法论与实践/_epub-src/EPUB/xhtml/chapter90.xhtml;来源项目:book-sources)
- 结论依据:图7-39明确Filter、count(*)、最终sum(count(*))三个步骤,说明计算下推减少返回数据的机制。
- 原始内容:当应用系统需要查询数据时,如执行Select count(*)from user where name=”TiDB”,会将该命令先发送给TiDB Server。TiDB Server会解析该SQL语句,将其转变为一个执行计划,将命令分发给每个TiKV节点。每个TiKV节点会先执行数据过滤与count(*)操作,最后将这些结果汇总给TiDB Server。