知识卡片

普通读书笔记卡 · 2275.as.6.d.2.f

压缩分段决定读放大

理解等级:高级

压缩单元需要有确定边界,流数据因而分帧处理。较大分段通常含更多重复内容,可提高压缩率,但增长到一定程度后收益减弱。即使只读几个字节,也可能必须解压整段;选择帧大小要同时考虑压缩率、压缩速度和局部读取的解压浪费。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 19-数据压缩:时间换空间的游戏 · 查看原书依据

      过大的分段长度,在解压缩的时候,会有更多的解压浪费。比如,一个1MB大小的压缩文件,即使你只是需要读其中很短的几个字节,也不得不把整个文件全部解压缩,造成很大的解压浪费。 所以,你需要根据你的业务,选择合适的压缩分段,在压缩率、压缩速度和解压浪费之间找到一个合适的平衡。

    参考来源

    - 位置:《消息队列高手课》第19章《19-数据压缩:时间换空间的游戏》(来源项目:book-sources;源文件:extracted/消息队列高手课/_epub-src/text/part0023_split_003.html;spine 129) - 结论依据:原文说明压缩单元需要有确定边界,流数据因而分帧处理。本卡以本节实际案例及分析版本为边界。 - 原始内容:过大的分段长度,在解压缩的时候,会有更多的解压浪费。比如,一个1MB大小的压缩文件,即使你只是需要读其中很短的几个字节,也不得不把整个文件全部解压缩,造成很大的解压浪费。 所以,你需要根据你的业务,选择合适的压缩分段,在压缩率、压缩速度和解压浪费之间找到一个合适的平衡。