知识卡片
键范围分区
键范围分区给每个分区一段连续的键区间,像百科全书按字母分卷。区间内数据有序,范围查询高效,比如用时间戳做主键能直接取出某月的全部数据。边界要按实际数据分布调整,不能平均切分字母表。致命弱点在时间戳主键:若每天一个分区,所有写入都落在今天的分区,形成写入热点。解法是在时间戳前加传感器名称等区分字段,让多个传感器的写入分散到不同分区;代价是查某段时间的全部数据时,要对每个传感器各查一次。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
- · 第六章:分区
原书出处 · 1 处
- 第六章:分区 · 查看原书依据
为了避免传感器数据库中的这个问题,需要使用除了时间戳以外的其他东西作为主键的第一个部分。
参考来源
- 位置:《数据密集型应用系统设计》第六章《分区》"根据键的范围分区"(源文件:_epub-src/ch6_split_003.html)
- 结论依据:原文说明键范围分区支持高效范围扫描(举传感器时间戳例子),但按时间
戳分区会导致所有写入集中在"今天"这一个分区形成热点,解法是在主键前加传感器名称
等字段先分散写入负载,代价是范围查询需要对每个名称单独执行,直接支撑本卡片
结论。
- 原始内容:如果主键是时间戳,则分区对应于时间范围……由于我们在测量发生时将数据从传感器写入数据库,因此所有写入操作都会转到同一个分区……为了避免传感器数据库中的这个问题,需要使用除了时间戳以外的其他东西作为主键的第一个部分。