知识卡片
检查点划分清洁与污浊区
日志清理检查点记录分区已清理到的位移。检查点之前是可能存在位移空洞的 clean 区;从 firstDirtyOffset(等于检查点)到 firstUncleanableOffset 之前是等待压实的 dirty 区,范围左闭右开。书中默认情况下,后一个边界是活跃分段的起始位移;活跃分段不参与压实。若读取方一直赶上 dirty 区,它可能看到每次写入;落后并只读取压实后的 clean 区,就不能指望重放所有历史版本。检查点用于描述清理进度,不能等同于消费者提交位移。
结构图:
flowchart LR
A[clean 区:已清理] --> B[firstDirtyOffset:清理检查点]
B --> C[dirty 区:待清理]
C --> D[firstUncleanableOffset:当前不可清理起点]
D --> E[活跃分段等暂不参与部分]
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第 5 章 5.4.2 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 19456–23731;图 5-17 `202_1.jpg`)
- 结论依据:原文定义检查点、clean 与 dirty 区间和活跃分段边界,并说明读取方能否看到全部消息取决于是否赶上 dirty 区;图 5-17 已回读。
- 原始内容:图5-17中的firstDirtyOffset(与cleaner checkpoint相等)表示dirty部分的起始偏移量,而firstUncleanableOffset为dirty部分的截止偏移量,整个dirty部分的偏移量范围为[firstDirtyOffset,firstUncleanableOffset)。