知识卡片
在线合并会挤占容量
读写数据库会累积不再使用的索引空间,需要通过合并回收。合并同时消耗CPU与磁盘,使节点服务能力下降;多个节点重叠合并时,剩余节点可能因承接负载而过载,形成级联故障。管理合并需要考虑调度重叠、耗时波动、临时磁盘空间和容量余量。减少核心系统对随机写入的依赖,也是在减少这类运维负担。
与[[复杂性来自增量]]的联系:在线合并是增量读写状态引入操作复杂性的具体机制。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
合并是一类集中操作。在合并过程中,服务器对CPU和磁盘有更高的要求,这大大降低了该时期机器的性能。众所周知,数据库(如HBase和Cassandra)都需要仔细地配置和管理,以免在合并时出现问题或服务器锁定。
参考来源
- 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第1章《大数据的新范式》(来源项目 book-sources;源文件:extracted/大数据系统构建:可扩展实时数据系统构建原理与最佳实践/_epub-src/OEBPS/Text/013.xhtml)
- 结论依据:原文给出合并回收空间、并发合并导致负载转移及级联故障的因果链;结论限于书中讨论的读写存储机制。
- 原始内容:合并是一类集中操作。在合并过程中,服务器对CPU和磁盘有更高的要求,这大大降低了该时期机器的性能。众所周知,数据库(如HBase和Cassandra)都需要仔细地配置和管理,以免在合并时出现问题或服务器锁定。