知识卡片

普通读书笔记卡 · 1783.e

在线合并会挤占容量

理解等级:高级

读写数据库会累积不再使用的索引空间,需要通过合并回收。合并同时消耗CPU与磁盘,使节点服务能力下降;多个节点重叠合并时,剩余节点可能因承接负载而过载,形成级联故障。管理合并需要考虑调度重叠、耗时波动、临时磁盘空间和容量余量。减少核心系统对随机写入的依赖,也是在减少这类运维负担。

与[[复杂性来自增量]]的联系:在线合并是增量读写状态引入操作复杂性的具体机制。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      合并是一类集中操作。在合并过程中,服务器对CPU和磁盘有更高的要求,这大大降低了该时期机器的性能。众所周知,数据库(如HBase和Cassandra)都需要仔细地配置和管理,以免在合并时出现问题或服务器锁定。

    参考来源

    - 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第1章《大数据的新范式》(来源项目 book-sources;源文件:extracted/大数据系统构建:可扩展实时数据系统构建原理与最佳实践/_epub-src/OEBPS/Text/013.xhtml) - 结论依据:原文给出合并回收空间、并发合并导致负载转移及级联故障的因果链;结论限于书中讨论的读写存储机制。 - 原始内容:合并是一类集中操作。在合并过程中,服务器对CPU和磁盘有更高的要求,这大大降低了该时期机器的性能。众所周知,数据库(如HBase和Cassandra)都需要仔细地配置和管理,以免在合并时出现问题或服务器锁定。