知识卡片

结构图卡

删段先移出再延迟删文件

理解等级:中级

书中 Kafka 清理过期分段时,先从 Log 维护的分段集合中移出待删段,使后续读取不再定位到它;再把该段的日志与索引文件改为 .deleted 后缀,最后由延迟任务实际删除,默认延迟 1 分钟。若所有分段都过期,先切出新的活跃分段接收写入,再清理旧段。因而“符合删除条件”“不可再读”“磁盘文件消失”是三个不同时间点。

结构图:

flowchart LR
    A[找出可删除分段] --> B{是否全部过期}
    B -- 是 --> C[先切出新活跃分段]
    B -- 否 --> D[从 Log 分段集合移出]
    C --> D
    D --> E[日志及索引文件改为 .deleted]
    E --> F[延迟任务删除文件]
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第 5 章 5.4.1 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 17012–19456) - 结论依据:原文依次描述活跃分段保证、从跳跃表移出、重命名与 `delete-file` 延迟任务;`file.delete.delay.ms` 的书中默认值为 60000 毫秒。 - 原始内容:会先切分出一个新的日志分段作为activeSegment,然后执行删除操作。删除日志分段时,首先会从Log对象中所维护日志分段的跳跃表中移除待删除的日志分段……最后交由一个以“delete-file”命名的延迟任务来删除这些以“.deleted”为后缀的文件。