知识卡片

普通读书笔记卡 · 2685.a

Hadoop平台分层

理解等级:未标注

企业级 Hadoop 是多个组件分层协作的平台:分布式文件系统负责存储,列式数据库提供海量表的实时读写,计算框架负责批处理,协调服务负责主备仲裁;产品化时还要补高可用、查询分析和性能优化。组件清单属于 2016 年前后的语境(书中已提到 Spark 正在取代 MapReduce),可保留的是“存储、资源管理、计算、查询与治理分层协作”这一结构。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《云计算架构技术与实践(第2版)》第10章《大数据平台核心技术与架构》(源文件:_epub-src/EPUB/text00018.html) - 结论依据:原文说明企业级Hadoop需在开源版本基础上增加HA、查询分析和性能优化,对外提供数据访问、存储、处理和保护能力,包括HDFS、HBase、MapReduce、ZooKeeper;Spark已有取代MapReduce成为默认执行引擎之势。审查要求标注2016年组件语境。 - 原始内容:Spark已有完全取代MapReduce成为Hadoop默认执行引擎之势……产品化的Hadoop需要在开源Hadoop版本的基础上对HBase、HDFS和MapReduce等组件增加HA、查询和分析功能,并进行性能优化。