知识卡片

普通读书笔记卡

污浊率决定压实候选

理解等级:中级

Kafka 用 dirty 区字节数占 clean 与 dirty 总字节数的比例衡量日志的“污浊率”:dirtyBytes / (cleanBytes + dirtyBytes);两个区间的边界见[[检查点划分清洁与污浊区]]。清理线程优先选择污浊率高的日志;书中 log.cleaner.min.cleanable.ratio 默认 0.5,限制了何时值得清理,避免刚有少量新消息就频繁重写分段。例如 clean 80 MiB、dirty 20 MiB 时比例为 0.2,尚未达到 0.5;两者各 50 MiB 时比例为 0.5。比例只是候选门槛,活跃分段和最小压实延迟仍可能使部分消息暂不可清理。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第 5 章 5.4.2 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 19456–23731;公式图 `203_1.jpg`) - 结论依据:原文说明清理线程选择污浊率最高的日志,公式图给出比例,随后解释最小污浊率参数;数字例子是按该公式计算的教学示例。 - 原始内容:这些线程会选择“污浊率”最高的日志文件进行清理……为了防止日志不必要的频繁清理操作,Kafka 还使用了参数 log.cleaner.min.cleanable.ratio(默认值为0.5)来限定可进行清理操作的最小污浊率。