知识卡片
计算要切成流程
复杂计算不只要按数据并行拆分,也要按处理阶段拆分。链式工头把 Map、Reduce 或更多阶段串成可观察的工艺流程,每个阶段内部再并行执行。这样异常定位、进度监控和业务理解都比一团计算逻辑更清楚。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
《大规模分布式系统架构与设计实战 (大数据技术丛书)》第2章《分布式并行计算的原理与实践》
知识卡片
复杂计算不只要按数据并行拆分,也要按处理阶段拆分。链式工头把 Map、Reduce 或更多阶段串成可观察的工艺流程,每个阶段内部再并行执行。这样异常定位、进度监控和业务理解都比一团计算逻辑更清楚。
这张卡片已通过人工审查,不再接受失败反馈。
还没有人提交反馈。