知识卡片
检查点必须同步算子状态与键控状态
重量级流框架靠检查点(某时刻内部状态的快照)支撑故障恢复和伸缩:节点挂了或要重分配分区,新实例直接从检查点加载状态,不用从最初输入重放。但检查点必须同时、原子地记录两类信息——算子状态(消费到了哪个偏移量)和键控状态(每个业务键当前聚合的结果),两者一旦不同步后果是灾难性的:偏移量领先会导致部分事件永远漏算,键控状态领先则导致事件被重复计算。发散:这是”进度指针”和”指针指向的执行结果”必须捆绑存储的通用教训,数据库WAL和数据页刷盘顺序是同一类问题。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
《微服务与事件驱动架构》第11章《使用重量级框架的微服务》