知识卡片
分析结果回灌要定义更新键
把分析结果回灌关系数据库时,必须决定如何识别“同一条记录”。书中 Sqoop export 示例以 id 为更新键:目标表已有该 id 就更新,缺失且允许插入时就新增。键和列映射是回灌语义的一部分,不能只把结果文件搬进数据库;设计重跑流程时应先确认会覆盖哪些行。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据技术体系详解:原理、架构与实践》第2章《关系型数据的收集》2.3.1(源文件:_epub-src/OEBPS/text00016.html)
- 结论依据:原文 export 实例使用 update-key 和 allowinsert,并解释 id 已存在时更新、否则插入。
- 原始内容:--update-key id --update-mode allowinsert……某一条数据对应的id,若在MySQL中已存在,则会更新这一行内容;否则,会将该条数据作为一条新记录插入表中。