知识卡片
共同分片提前支付布局成本
若经常按同一键连接两表,加载时把同键记录放到对应节点,可减少查询时的Shuffle。收益来自布局与查询键匹配,换连接键或扩缩容可能需要重新分布。它不是查询优化器凭空制造局部性,需明确维护成本和数据偏斜。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 交互式数据分析 · 查看原书依据
13.2.3 数据共同分片 表的Join操作在数据仓库中是非常常见的操作,MPP并行数据库通常采用“共同分片”的措施来加快这种操作运行过程。
参考来源
- 位置:《大数据日知录:架构与算法》第13章《交互式数据分析》(来源项目:book-sources;源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00018.html)
- 结论依据:原文在本章对共同分片提前支付布局成本给出的定义、机制或示例支持本卡;技术产品描述限于2014年书中版本,示例与实测区分。
- 原始内容:13.2.3 数据共同分片 表的Join操作在数据仓库中是非常常见的操作,MPP并行数据库通常采用“共同分片”的措施来加快这种操作运行过程。