← 返回卡片

原书出处

大数据日知录_架构与算法

13 交互式数据分析

2014年9月第1版 · 核验版本的摘录快照 · 导入于 2026-10-24T04:14:12.149Z

第一处是在MR任务内部发生的,Map任务结束时,需要将中间结果持久化到本地磁盘,为了增加Reduce任务的容 错性,Reduce以拉取(Pull)方式从Map端获取中间数据,这样做的好处是即使Reduce任务发生故障,也只需要从持久化数据重新拉取中间结果,再次启动Reduce任务即可,而不需要所有的Map任务重新执行,所以这是一种细粒度的容错机制。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00018.html

EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d