知识卡片
批处理必须能够补跑
批处理遇到数据错误时,应留下错误信息和断点,支持修正后续跑;不能续跑的任务需要回滚到起点的办法。任务不能因跨过日期就失效,应能继续补跑直到追平。兜底设计必须说明人工如何介入,不能把调度器重试成功当作业务数据正确的证明。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
任何一步数据问题导致的任务异常停止,造成批处理中断时,需要记录全部错误信息以及批处理断点信息,确保通过人工修改后,能够在断点处续跑。对于无法续跑的任务,出现异常时应该回滚至任务开始。
参考来源
- 位置:《软件平台架构设计与技术管理之道》第02章《萃取精华,驾驭主题》(来源项目 book-sources,extracted/软件平台架构设计与技术管理之道/_epub-src/index_split_030.html)
- 结论依据:原文的解释与案例支持上述机制;文中的适用限制用来避免把经验建议泛化。
- 原始内容:任何一步数据问题导致的任务异常停止,造成批处理中断时,需要记录全部错误信息以及批处理断点信息,确保通过人工修改后,能够在断点处续跑。对于无法续跑的任务,出现异常时应该回滚至任务开始。