知识卡片

普通读书笔记卡 · 1773.n

列族聚合常用字段

理解等级:中级

纯列式布局按字段聚集,减少扫描无关列,却可能在取完整记录时付出跨列拼接成本。列族把经常共同访问的字段放在一组,减少部分重组代价;这仍需依工作负载选边界。Bigtable的宽列模型与分析型列存概念相关但不相同,HDFS本身也不强制这种记录格式。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 分布式文件系统 · 查看原书依据

      采用列族方式存储布局可以在一定程度上缓解这个问题,所谓“列族”,就是将记录的列进行分组,将经常一起使用的列分为一组,这样即使是按照列式来存储数据的,也可以将经常联合使用的列数据存储在一个数据块中,避免不必要的网络传输来获取多列数据,对于某些场景会较大提高系统性能。图8-19就是在HDFS场景下采用列族方式存储数据的一个示意图,从图中可以看出,列被分为3组:A和B分为一组,C和D各自形成一组,即将列划分为3个列族并存储在不同数据块中。

    参考来源

    - 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落158(OEBPS/text00013.html)。 - 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。 - 原始内容:采用列族方式存储布局可以在一定程度上缓解这个问题,所谓“列族”,就是将记录的列进行分组,将经常一起使用的列分为一组,这样即使是按照列式来存储数据的,也可以将经常联合使用的列数据存储在一个数据块中,避免不必要的网络传输来获取多列数据,对于某些场景会较大提高系统性能。图8-19就是在HDFS场景下采用列族方式存储数据的一个示意图,从图中可以看出,列被分为3组:A和B分为一组,C和D各自形成一组,即将列划分为3个列族并存储在不同数据块中。