知识卡片
压缩分段决定读放大
压缩单元需要有确定边界,流数据因而分帧处理。较大分段通常含更多重复内容,可提高压缩率,但增长到一定程度后收益减弱。即使只读几个字节,也可能必须解压整段;选择帧大小要同时考虑压缩率、压缩速度和局部读取的解压浪费。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 19-数据压缩:时间换空间的游戏 · 查看原书依据
过大的分段长度,在解压缩的时候,会有更多的解压浪费。比如,一个1MB大小的压缩文件,即使你只是需要读其中很短的几个字节,也不得不把整个文件全部解压缩,造成很大的解压浪费。 所以,你需要根据你的业务,选择合适的压缩分段,在压缩率、压缩速度和解压浪费之间找到一个合适的平衡。
参考来源
- 位置:《消息队列高手课》第19章《19-数据压缩:时间换空间的游戏》(来源项目:book-sources;源文件:extracted/消息队列高手课/_epub-src/text/part0023_split_003.html;spine 129)
- 结论依据:原文说明压缩单元需要有确定边界,流数据因而分帧处理。本卡以本节实际案例及分析版本为边界。
- 原始内容:过大的分段长度,在解压缩的时候,会有更多的解压浪费。比如,一个1MB大小的压缩文件,即使你只是需要读其中很短的几个字节,也不得不把整个文件全部解压缩,造成很大的解压浪费。 所以,你需要根据你的业务,选择合适的压缩分段,在压缩率、压缩速度和解压浪费之间找到一个合适的平衡。