知识卡片
检查点须对齐可重放输入
检查点保存中间状态,恢复时还要知道对应输入位置并从那里重放。检查点较稀疏会增加重算,不一定导致永久丢失,前提是输入日志仍在且状态与位置一致;若没有可重放数据,检查点之后的状态才可能无法补回。快照频率需按恢复时间与持久化成本权衡。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 流式计算 · 查看原书依据
检查点方式也有其对应的两个缺点。首先,如果状态信息较多,为了恢复状态信息,备用节点切换过程可能较长。其次,检查点备份的时间周期也需要仔细斟酌,如果备份周期长,则很可能在上次和下次备份信息之间的系统发生故障,这样依然会存在丢失状态信息的可能;而如果备份周期 短,则系统会花费很多资源用在数据备份上,也会影响系统整体的性能。
参考来源
- 位置:《大数据日知录:架构与算法》第12章《流式计算》,原文段落113(OEBPS/text00017.html)。
- 结论依据:本卡说明书中机制及其适用条件;出版时版本、目标数字与架构状态不作为当前普遍保证。
- 原始内容:检查点方式也有其对应的两个缺点。首先,如果状态信息较多,为了恢复状态信息,备用节点切换过程可能较长。其次,检查点备份的时间周期也需要仔细斟酌,如果备份周期长,则很可能在上次和下次备份信息之间的系统发生故障,这样依然会存在丢失状态信息的可能;而如果备份周期 短,则系统会花费很多资源用在数据备份上,也会影响系统整体的性能。