知识卡片

普通读书笔记卡 · 3122.b

Sqoop2把连接器与作业管理集中到服务端

理解等级:中级

Sqoop1 把数据库驱动、连接器和客户端工具散落在使用者机器上,部署与安全管理困难。Sqoop2 增设服务端,集中管理连接器、元数据和认证;客户端只创建 Link(数据源连接)与 Job(源到目标的迁移),服务端再提交分布式任务。复杂性从各客户端转到共享服务,换取统一接入和更轻的客户端。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大数据技术体系详解:原理、架构与实践》第2章《关系型数据的收集》2.2–2.3(源文件:_epub-src/OEBPS/text00015.html;_epub-src/OEBPS/text00016.html) - 结论依据:原文列出 Sqoop1 客户端依赖和安全缺点,再说明 Sqoop2 Server 集中 Connector、元数据与认证,Link 和 Job 分别表示连接器实例及迁移作业。 - 原始内容:Sqoop1要求依赖的软件必须安装在客户端上……引入了Sqoop Server,将所有管理工作放到Server端,包括Connector管理、MySQL/Hadoop相关的客户端、安全认证等……Link:一个Connector实例。……Job:完成数据迁移功能的分布式作业