知识卡片
重复键前缀会放大HBase存储
HBase 的每个 Cell 版本在物理记录中都带有 Row Key、列簇名、列限定符和时间戳。列名或键前缀过长会在大量记录与历史版本中反复出现,放大存储占用。设计键名时应兼顾业务可读性与重复编码成本,尤其要留意高列数、多版本的表。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据技术体系详解:原理、架构与实践》第7章《分布式结构化存储系统》7.2.2(源文件:_epub-src/OEBPS/text00050.html)
- 结论依据:原文给出 Cell 的物理 Key/Value 组成,并指出不同版本的 Cell 会重复保存各层键名,建议在可理解前提下缩短字段值。
- 原始内容:每个column family内部数据是以key value格式保存的,key value组成如下: [row key, column family, column qualifier, timestamp] => value……每行数据中不同版本的cell value会重复保存rowkey,column family和column qualifier,因此,为了节省存储空间,这几个字段值在保证业务易理解的前提下,应尽可能短。