知识卡片
清理策略可组合配置
Kafka 的日志清理有两种策略:delete 按保留条件删除整个日志分段,compact 按消息 key 保留最新值。书中 Kafka 版本的 broker 参数 log.cleanup.policy 默认为 delete;设为 compact 时还须启用 log.cleaner.enable,也可以配置 delete,compact 同时采用两种策略。主题级 cleanup.policy 可覆盖到具体主题。选择时要明确该主题需要保留事件历史、每个 key 的最新状态,还是两者结合。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《深入理解Kafka:核心设计与实践原理 2019》第 5 章 5.4 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 16426–17012)
- 结论依据:原文列出两种策略、`log.cleanup.policy` 的默认值与组合值,以及 broker 和 topic 两级参数。
- 原始内容:通过将log.cleanup.policy参数设置为“delete,compact”,还可以同时支持日志删除和日志压缩两种策略。日志清理的粒度可以控制到主题级别。