知识卡片
Parquet按行组组织列页
Parquet 文件按行组组织数据,行组内各列再分成页;页存实际编码数据,页脚和相关元数据可帮助读取器定位列并按统计范围跳过不相关部分。它适合只读少数列的分析负载。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Practical Lakehouse Architecture》第3章《Storage: The Heart of the Lakehouse》(源文件:_epub-src/OEBPS/ch03.html)
- 结论依据:原文描述 Parquet 的行组、列、页和 footer 统计信息;Apache 官方格式文档也确认页与列块索引的跳过机制。
- 原始内容:The Parquet file structure is as follows: Every parquet file consists of a header, footer, and data block. The header has details that indicate the file is in Parquet format. The data block consists of multiple row groups that logically combine various rows within the file. The row groups consist of columns present in the