返回主题:数据集成与分拆:一份真源与多份衍生

知识卡片

延伸参考卡 · 1769.u.4

Sqoop解决异构系统批量迁移

理解等级:中级

Sqoop通过连接器及批量任务,把数据在关系库等系统与Hadoop存储之间导入或导出,适合区别于逐条变更订阅的搬迁需求。书中Sqoop1命令行到Sqoop2服务接口的比较保留历史版本范围,不视为当前安装推荐。选择迁移工具还要核对类型映射、一致性快照、失败恢复和目标负载。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 数据通道 · 查看原书依据

      Sqoop是专门在Hadoop和其他关系型数据库或者NoSQL数据库之间进行相互之间数据导入和导出的开源工具(见图7-9)。在其内部实现时,具体的导入/导出工作是通过可以连接并操作数据库的MR任务完成的。

    参考来源

    - 位置:《大数据日知录:架构与算法》7(源文件:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00012.html) - 结论依据:本章实际原文及必要原图;产品与性能描述保留2014年版本范围。校正的官方入口及实际阅读范围见50-root-official.json。 - 原始内容:Sqoop是专门在Hadoop和其他关系型数据库或者NoSQL数据库之间进行相互之间数据导入和导出的开源工具(见图7-9)。在其内部实现时,具体的导入/导出工作是通过可以连接并操作数据库的MR任务完成的。