知识卡片

普通读书笔记卡 · 1778.i

分桶按键分散文件

理解等级:中级

桶把表或分区内的记录按某列哈希分配到若干文件,分区则常按字段值对应目录。二者可组合,但不能把哈希桶号当业务范围顺序。桶数和分布规则会影响后续执行能否利用局部性,分桶本身不自动消除所有数据交换。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 交互式数据分析 · 查看原书依据

      数据桶是数据组织层次中的最底层,在创建数据表的时候,用户可以指定分桶个数及根据哪一列数据对数据表或者数据分片进行分桶。

    参考来源

    - 位置:《大数据日知录:架构与算法》第13章《交互式数据分析》(来源项目:book-sources;源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00018.html) - 结论依据:原文在本章对分桶按键分散文件给出的定义、机制或示例支持本卡;技术产品描述限于2014年书中版本,示例与实测区分。 - 原始内容:数据桶是数据组织层次中的最底层,在创建数据表的时候,用户可以指定分桶个数及根据哪一列数据对数据表或者数据分片进行分桶。