知识卡片
删段先移出再延迟删文件
书中 Kafka 清理过期分段时,先从 Log 维护的分段集合中移出待删段,使后续读取不再定位到它;再把该段的日志与索引文件改为 .deleted 后缀,最后由延迟任务实际删除,默认延迟 1 分钟。若所有分段都过期,先切出新的活跃分段接收写入,再清理旧段。因而“符合删除条件”“不可再读”“磁盘文件消失”是三个不同时间点。
结构图:
flowchart LR
A[找出可删除分段] --> B{是否全部过期}
B -- 是 --> C[先切出新活跃分段]
B -- 否 --> D[从 Log 分段集合移出]
C --> D
D --> E[日志及索引文件改为 .deleted]
E --> F[延迟任务删除文件]
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第 5 章 5.4.1 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 17012–19456)
- 结论依据:原文依次描述活跃分段保证、从跳跃表移出、重命名与 `delete-file` 延迟任务;`file.delete.delay.ms` 的书中默认值为 60000 毫秒。
- 原始内容:会先切分出一个新的日志分段作为activeSegment,然后执行删除操作。删除日志分段时,首先会从Log对象中所维护日志分段的跳跃表中移除待删除的日志分段……最后交由一个以“delete-file”命名的延迟任务来删除这些以“.deleted”为后缀的文件。