知识卡片
列式Chunk压缩对象开销
Chunk 把同列数据连续组织,用一批数据替代逐行 Datum 对象流转。它支持追加而非任意随机写;收益包括减少对象开销、便于复用和统计内存,而不只是把若干行装进一个容器。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 6 处
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
TiDB 2.0 中,我们引入了一个叫 Chunk 的数据结构用来在内存中存储内部数据,用于减小内存分配开销、降低内存占用以及实现内存使用量统计/控制,其特点如下:
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
只读
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
不支持随机写
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
只支持追加写
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
列存,同一列的数据连续的在内存中存放
- TiDB 源码阅读系列文章(十)Chunk 和执行框架简介 · 查看原书依据
Chunk 本质上是 Column 的集合,它负责连续的在内存中存储同一列的数据,接下来我们看看 Column 的实现。
参考来源
- 位置:《TiDB源码阅读系列文章》第10章《TiDB 源码阅读系列文章(十)Chunk 和执行框架简介》(来源项目:book-sources;源文件:extracted/TiDB源码阅读系列文章/_epub-src/OEBPS/Text/TiDB 源码阅读系列文章(十)Chunk 和执行框架简介.html;阅读段落 2,3,4,5,6,7;均为书中版本)
- 结论依据:原文对列式Chunk压缩对象开销给出上述机制或边界;本卡把已读说明整理为可独立理解的解释。
- 原始内容:TiDB 2.0 中,我们引入了一个叫 Chunk 的数据结构用来在内存中存储内部数据,用于减小内存分配开销、降低内存占用以及实现内存使用量统计/控制,其特点如下: …… 只读 …… 不支持随机写 …… 只支持追加写 …… 列存,同一列的数据连续的在内存中存放 …… Chunk 本质上是 Column 的集合,它负责连续的在内存中存储同一列的数据,接下来我们看看 Column 的实现。