知识卡片
放置组的批处理粒度权衡
集群中有数百万个对象,逐个管理代价太大,Ceph先把对象分进放置组,再以放置组为单位做副本分配、迁移和均衡。放置组过少时,每组数据占比大,移动一组就要同时搬大量数据;过多则每组的状态维护本身消耗CPU和内存。放置组数量应结合自动调整和目标容量设定,而非套固定公式。发散:分片粒度是影响面与管理开销的折中。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Ceph企业级分布式存储 原理与工程实践》第3章《Ceph核心技术组件》(源文件:_epub-src/OEBPS/Text/000057.xhtml)
- 结论依据:原文说明Ceph用放置组提高管理大量对象的效率,并指出放置组太少时移动一组意味着同时移动大量数据、网络负载升高。
- 原始内容:Ceph集群中存储了数百万个对象,如果分别对对象进行管理会占用大量资源。……因此,Ceph使用放置组来提高管理大量对象的效率。……如果存储池中的放置组太少,每个放置组分配的存储池中的数据比例将很大,移动放置组则意味着Ceph集群中要同时移动大量数据,并且网络负载也会变高,从而对集群的性能产生不利影响。