返回主题:存储常用数据结构

知识卡片

普通读书笔记卡

"内容更长的表反而占用空间更小",是TOAST压缩阈值造成的

理解等级:未标注

[[TOAST用切片和压缩绕开固定页大小对大字段的限制]]描述的压缩机制有一个 反直觉的具体后果:字段内容”稍微短一点”的表,实际占用的磁盘空间可能 反而比字段内容”稍微长一点”的表更大。原因在于TOAST压缩不是按内容长度 连续生效的,而是一个硬阈值触发的开关——只有当字段值超过约2040字节 (一个数据块的四分之一)时才会触发压缩;假设有结构相同的两张表,A表 每行某字段长度略小于这个阈值(比如2000字节),完全不触发压缩,原样 存储;B表同一字段长度略大于阈值(比如2100字节),触发了压缩,如果这 100字节的内容里有较多重复模式、压缩率不错,压缩后的实际存储长度反而 可能比A表未压缩的2000字节还小——于是就出现了”字段内容更长的B表, 磁盘占用反而比内容更短的A表小”这种直觉上说不通的现象。这个案例提醒: 评估存储占用不能只看”逻辑上存了多少数据”,还要考虑数据库内部是否存在 这类”跨过某个阈值才触发优化”的非连续行为——阈值本身在旧版本(PG11 之前)是编译时写死的常量,无法调整,PG11之后才开放toast_tuple_target 参数允许按表单独配置这个触发点,这意味着排查这类”占用空间反直觉”的 问题时,还要留意目标版本的这个阈值是否被自定义过。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《PostgreSQL修炼之道:从小工到专家(第2版)》第6章"逻辑结构 管理"6.4.2节"表的存储属性"(源文件: _epub-src/OEBPS/Text/chapter175.xhtml) - 结论依据:原文明确"只有当数据的长度超过2040字节……时,才会触发 TOAST压缩机制对数据进行压缩。有时就会产生一个有趣的现象,即数据多 的表反而占用空间少……你通常会发现字段内容更长的B表实际占用的空间 却比A表小,这是由于B表触发了TOAST的压缩机制",直接给出压缩阈值 触发方式及"内容更长反而占用更小"这一具体现象的成因。 - 原始内容:只有当数据的长度超过2040字节(大约为一个BLOCK的四分之一) 时,才会触发TOAST压缩机制对数据进行压缩。有时就会产生一个有趣的 现象,即数据多的表反而占用空间少。