知识卡片
隔离不等于调度公平
调度决定分给谁多少资源,隔离限制任务实际使用以减轻相互干扰。书中容器与cgroups用于CPU、内存等资源控制,但不同资源的隔离强度和版本能力不同,共享内核与设备仍可能干扰。LXC、lmctfy、Warden是历史实现例子,不能据此断定当前YARN或Mesos均只用同一容器方案。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 集群资源管理与调度 · 查看原书依据
目前对于资源隔离最常用的手段是Linux容器(Linux Container,LXC),YARN和Mesos都采用了这种方式来实现资源隔离。LXC是一种轻量级的内核虚拟化技术,可以用来进行资源和进程运行的隔离,通过LXC可以在一台物理主机上隔离出多个相互隔离的容器,目前有开源版本。LXC在资源管理方面依赖于Linux内核的cgroups子系统,cgroups子系统是Linux内核提供的一个基于进程组的资源管理的框架,可以为特定的进程组限定可以使用的资源。
参考来源
- 位置:《大数据日知录:架构与算法》第4章《集群资源管理与调度》(来源项目:book-sources;源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00009.html)
- 结论依据:原文以“cgroups子系统是Linux内核提供的”所在段落解释具体机制;本卡保留其条件,另将实现限制、勘误和教学推导在正文中明确区分。
- 原始内容:目前对于资源隔离最常用的手段是Linux容器(Linux Container,LXC),YARN和Mesos都采用了这种方式来实现资源隔离。LXC是一种轻量级的内核虚拟化技术,可以用来进行资源和进程运行的隔离,通过LXC可以在一台物理主机上隔离出多个相互隔离的容器,目前有开源版本。LXC在资源管理方面依赖于Linux内核的cgroups子系统,cgroups子系统是Linux内核提供的一个基于进程组的资源管理的框架,可以为特定的进程组限定可以使用的资源。