知识卡片

普通读书笔记卡 · 1776.p

共同分片提前支付布局成本

理解等级:中级

若经常按同一键连接两表,加载时把同键记录放到对应节点,可减少查询时的Shuffle。收益来自布局与查询键匹配,换连接键或扩缩容可能需要重新分布。它不是查询优化器凭空制造局部性,需明确维护成本和数据偏斜。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 交互式数据分析 · 查看原书依据

      13.2.3 数据共同分片 表的Join操作在数据仓库中是非常常见的操作,MPP并行数据库通常采用“共同分片”的措施来加快这种操作运行过程。

    参考来源

    - 位置:《大数据日知录:架构与算法》第13章《交互式数据分析》(来源项目:book-sources;源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00018.html) - 结论依据:原文在本章对共同分片提前支付布局成本给出的定义、机制或示例支持本卡;技术产品描述限于2014年书中版本,示例与实测区分。 - 原始内容:13.2.3 数据共同分片 表的Join操作在数据仓库中是非常常见的操作,MPP并行数据库通常采用“共同分片”的措施来加快这种操作运行过程。