知识卡片
快照对应输出事务
每个Flink CheckPoint对应一个Kafka事务:快照完成时同步提交该批输出,恢复时回到上一个完整快照及其已提交输出边界。未完成快照对应的未提交输出被丢弃。两阶段提交协调“保存状态”和“输出可见”,避免恢复后重复暴露已经输出的结果。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
- · 快照对应输出事务
原书出处 · 1 处
- 30-流计算与消息(二):在流计算中使用Kafka链接计算任务 · 查看原书依据
每个Flink的CheckPoint对应一个Kafka事务。Flink在创建一个CheckPoint的时候,同时开启一个Kafka的事务,完成CheckPoint同时提交Kafka的事务。
参考来源
- 位置:《消息队列高手课》第30章《30-流计算与消息(二):在流计算中使用Kafka链接计算任务》(来源项目:book-sources;源文件:extracted/消息队列高手课/_epub-src/text/part0034_split_002.html;spine 192)
- 结论依据:原文说明每个Flink CheckPoint对应一个Kafka事务:快照完成时同步提交该批输出,恢复时回到上一个完整快照及其已提交输出边界。本卡以本节实际案例及分析版本为边界。
- 原始内容:每个Flink的CheckPoint对应一个Kafka事务。Flink在创建一个CheckPoint的时候,同时开启一个Kafka的事务,完成CheckPoint同时提交Kafka的事务。