知识卡片

普通读书笔记卡 · 4320

WAL压缩资源互换

理解等级:高级

PostgreSQL的WAL记录恢复所需的变更,并非对每次修改都保存完整的写前、写后数据。开启full_page_writes时,检查点后首次修改数据页通常还会把整页镜像写入WAL,用于修复崩溃时的部分页写入。WAL默认按16MB分段;以PostgreSQL 17为例,分段大小可以在initdb初始化时配置,不是所有集群恒定为16MB。

PostgreSQL 9.5引入的wal_compression压缩的是WAL中的整页镜像,不是全部WAL记录,也不会压缩数据库数据文件。它可能降低WAL数据量、I/O和物理复制传输量,代价是生成日志时压缩、回放时解压都增加CPU开销。

收益取决于整页镜像占比、可压缩性和实际负载;归档存储收益还受固定分段与归档方式影响。应在CPU有余量且WAL I/O或带宽受限时测量这种资源互换,不能保证开启后整体性能必然提高。原书“写前写后”和“数据块压缩”的简述,应按上述具体机制理解。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《高可用架构(第1卷)》第6章《大数据与数据库》"6.10 从Postgres95到PostgreSQL9.5:新版亮眼特性"节,"6.10.3 PostgresSQL9.5的亮眼特性"(源文件:_epub-src/OEBPS/Text/Chapter6_10_4.xhtml) - 结论依据:原文介绍9.5引入WAL压缩及CPU换取更少I/O、复制传输量的动机;其中“写前写后”“数据块压缩”和固定16MB的简述不足以精确说明机制。本卡保留原始摘录,并用下列PG17官方文档核正压缩对象、整页镜像、分段配置及性能收益边界。 - 原始内容:PostgreSQL以16MB为单位保存WAL日志文件……PostgreSQL 9.5提供了WAL日志压缩功能来解决此问题,写日志时对数据块进行压缩。往磁盘写更少的数据,复制的传输的量也会少,可以更新的性能提高,但CPU的消耗量会上升。 **补充核验**: - [PostgreSQL 17 WAL配置](https://www.postgresql.org/docs/17/runtime-config-wal.html):`full_page_writes`的整页镜像与`wal_compression`的压缩范围、回放解压及CPU代价。 - [WAL内部机制](https://www.postgresql.org/docs/17/wal-internals.html)与[initdb](https://www.postgresql.org/docs/17/app-initdb.html):默认分段与初始化配置边界。 - [WAL运行配置](https://www.postgresql.org/docs/17/wal-configuration.html):检查点频率与WAL量等条件;未执行压缩性能实验。