知识卡片
全量索引也有放大成本
任意字段都要可查询,并不意味着必须给每个字段建立索引。索引需要额外存储和写入维护;历史Dapper案例仅三个字段的索引就接近原追踪数据体量。把全部事件放进内存可以加速扫描,却改变成本边界。选存储应同时比较查询灵活性、索引放大和内存成本,不能只比较单次查询速度。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 高效的数据存储 · 查看原书依据
值得注意的是,Google Dapper后端论文指出,试图在Bigtable中为Dapper Depots的三个字段(服务、主机和时间戳)生成索引,产生的数据是链路追踪数据本身大小的76%。
参考来源
- 位置:《可观测性工程》第16章《高效的数据存储》(来源项目:book-sources;源文件:extracted/可观测性工程/_epub-src/OEBPS/029.xhtml)
- 结论依据:原文围绕“76%”给出的机制、条件或对比支持本卡;根据完整上下文解释,图中示例仅作为概念演示,未声称运行结果。
- 原始内容:值得注意的是,Google Dapper后端论文指出,试图在Bigtable中为Dapper Depots的三个字段(服务、主机和时间戳)生成索引,产生的数据是链路追踪数据本身大小的76%。