知识卡片

普通读书笔记卡

已提交读取用LSO计算滞后

理解等级:中级

消费滞后量要以该消费者可读到的末端减去已提交的消费位移。本书 Kafka 2.0.0 的普通情况或 read_uncommitted 消费者按 HW − ConsumerOffset 计算;若消费者使用 read_committed 且分区有未完成事务,可读末端是最后稳定位置 LSO,改为 LSO − ConsumerOffset。LSO 位于首条未完成事务消息处,满足 LSO ≤ HW ≤ LEO(LEO 是日志末端),因此同一个已提交位移在两种隔离级别下可能显示不同滞后量。例如已提交位移为 3、LSO 为 5、HW 为 8,则已提交读取的滞后是 2,未提交读取按本书口径为 5;不能把后者直接解释为前者当前可消费的消息数。若事务完成,书中说明 LSO 与 HW 相同。与 [[消费组滞后量依提交位移计算]] 对照时须注明隔离级别。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第10章《Kafka监控》10.2 节及图 10-7、图 10-8(源文件:`_epub-src/OEBPS/Text/chapter11.xhtml`;图片:`_epub-src/OEBPS/Images/353_1.jpg`、`353_2.jpg`) - 结论依据:正文分别给出 HW 和 LSO 两种滞后计算口径、LSO 的未完成事务边界及 `LSO≤HW≤LEO`;3/5/8 是依据公式构造的说明例子,非书中实测数据。 - 原始内容:对于分区中有未完成的事务,并且消费者客户端的 isolation.level 参数配置为“read_committed”的情况,它对应的Lag等于LSO-ConsumerOffset的值。