知识卡片
开放平台靠规范流程监控
开放 Hadoop 平台要持续运营,须同时建设规范、流程与监控。规范明确 HDFS 目录用途和命名;流程覆盖注册、权限申请和版本发布,且要控制粒度并坚持执行;监控节点、磁盘、日志、配额、队列及历史作业,在事故前发现异常,并用结果调整集群参数。认证解决准入,三者维护平台长期秩序。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据时代的IT架构设计》第1篇《优酷土豆Hadoop平台开放之路》"平台运营"
(源文件:_epub-src/OEBPS/text00008.html)
- 结论依据:原文说明"如何才能运营好一个Hadoop平台,技术往往占很少的一部分,还需要从
很多方面进行规范和监控",并分别展开规范(目录/命名)、流程(注册/权限/升级)、监控
(节点/磁盘/异常/配额/队列/历史作业六类)的具体做法,直接支撑本卡片对三支柱的归纳。
- 原始内容:如何才能运营好一个Hadoop平台,技术往往占很少的一部分,还需要从很多方面
进行规范和监控……规范保证了随着时间的推移,平台依旧像刚部署时一样……流程减少了
管理人员与用户的不必要沟通……监控实际上也是对现有服务的分析,可以通过监控的结果
指导集群参数调优。