知识卡片

普通读书笔记卡

v1时间戳有两种语义

理解等级:中级

书中 Kafka 0.10.0 至 0.11.0 之前的 v1 消息格式,在 v0 的 RECORD 中增加了 8B timestamp,magic 变为 1。attributes 的一个标志位区分时间语义:CreateTime 是生产者创建消息的时间;LogAppendTime 是 broker 追加日志的时间。前者适合观察消息从创建到处理的延迟,后者表示进入日志的时点;分析延迟或按时间查询前,应先确认采用哪一种。书中 broker 参数 log.message.timestamp.type 默认选 CreateTime;生产者未给 ProducerRecord 显式设时间时,发送前会补上时间戳。

新增的 8B 使最小 RECORD 从 v0 的 14B 增为 22B;沿用 3B 键 key 与 5B 值 value 的例子,完整消息从 34B 增为 12+22+3+5=42B。这里的 12B 是记录外的日志头,不能重复算进 RECORD。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第5章 5.2.2 节(源文件:`_epub-src/OEBPS/Text/chapter6.xhtml`;正文归一化字符位 4218–4785;图 5-4 `180_2.jpg`) - 结论依据:原文说明 v1 的版本范围、8B 时间戳、`attributes` 的时间类型位、broker 默认配置与生产者补时间戳,并对比 v0/v1 最小长度及 42B 示例;图 5-4 已回读。 - 原始内容:v1版本的attributes字段中的低3位和v0版本的一样,还是表示压缩类型,而第4个位(bit)也被利用了起来:0表示timestamp类型为CreateTime,而1表示timestamp类型为LogAppendTime……v1 版本的消息的最小长度……要比 v0 版本的大 8 个字节,即22B。