知识卡片

普通读书笔记卡 · 1778.g.1

序列化接口扩展数据格式

理解等级:中级

SerDe把外部文件内容与表中字段的解释衔接起来,ObjectInspector帮助运行时检查对象结构。自定义格式由解析接口绑定,查询前端不必为每种文件重新实现整套语言。格式可扩展不等于任何编码都具备同样的谓词下推或列裁剪能力。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 交互式数据分析 · 查看原书依据

      为了能够支持更多的Hadoop数据存储方式,Hive提供了SerDe接口,用户可以定制数据序列化与反序列化程序,通过SerDe接口将数据表及其对应的用户解析程序进行绑定,这样就可以灵活地扩展并支持各种数据存储方式,比如列式存储等。

    参考来源

    - 位置:《大数据日知录:架构与算法》第13章《交互式数据分析》(来源项目:book-sources;源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00018.html) - 结论依据:原文在本章对序列化接口扩展数据格式给出的定义、机制或示例支持本卡;技术产品描述限于2014年书中版本,示例与实测区分。 - 原始内容:为了能够支持更多的Hadoop数据存储方式,Hive提供了SerDe接口,用户可以定制数据序列化与反序列化程序,通过SerDe接口将数据表及其对应的用户解析程序进行绑定,这样就可以灵活地扩展并支持各种数据存储方式,比如列式存储等。