知识卡片

普通读书笔记卡 · 3122.c

分析结果回灌要定义更新键

理解等级:中级

把分析结果回灌关系数据库时,必须决定如何识别“同一条记录”。书中 Sqoop export 示例以 id 为更新键:目标表已有该 id 就更新,缺失且允许插入时就新增。键和列映射是回灌语义的一部分,不能只把结果文件搬进数据库;设计重跑流程时应先确认会覆盖哪些行。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大数据技术体系详解:原理、架构与实践》第2章《关系型数据的收集》2.3.1(源文件:_epub-src/OEBPS/text00016.html) - 结论依据:原文 export 实例使用 update-key 和 allowinsert,并解释 id 已存在时更新、否则插入。 - 原始内容:--update-key id --update-mode allowinsert……某一条数据对应的id,若在MySQL中已存在,则会更新这一行内容;否则,会将该条数据作为一条新记录插入表中。