知识卡片
列族聚合常用字段
纯列式布局按字段聚集,减少扫描无关列,却可能在取完整记录时付出跨列拼接成本。列族把经常共同访问的字段放在一组,减少部分重组代价;这仍需依工作负载选边界。Bigtable的宽列模型与分析型列存概念相关但不相同,HDFS本身也不强制这种记录格式。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 分布式文件系统 · 查看原书依据
采用列族方式存储布局可以在一定程度上缓解这个问题,所谓“列族”,就是将记录的列进行分组,将经常一起使用的列分为一组,这样即使是按照列式来存储数据的,也可以将经常联合使用的列数据存储在一个数据块中,避免不必要的网络传输来获取多列数据,对于某些场景会较大提高系统性能。图8-19就是在HDFS场景下采用列族方式存储数据的一个示意图,从图中可以看出,列被分为3组:A和B分为一组,C和D各自形成一组,即将列划分为3个列族并存储在不同数据块中。
参考来源
- 位置:《大数据日知录:架构与算法》第8章《分布式文件系统》,原文段落158(OEBPS/text00013.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。
- 原始内容:采用列族方式存储布局可以在一定程度上缓解这个问题,所谓“列族”,就是将记录的列进行分组,将经常一起使用的列分为一组,这样即使是按照列式来存储数据的,也可以将经常联合使用的列数据存储在一个数据块中,避免不必要的网络传输来获取多列数据,对于某些场景会较大提高系统性能。图8-19就是在HDFS场景下采用列族方式存储数据的一个示意图,从图中可以看出,列被分为3组:A和B分为一组,C和D各自形成一组,即将列划分为3个列族并存储在不同数据块中。