知识卡片
Sqoop2把连接器与作业管理集中到服务端
Sqoop1 把数据库驱动、连接器和客户端工具散落在使用者机器上,部署与安全管理困难。Sqoop2 增设服务端,集中管理连接器、元数据和认证;客户端只创建 Link(数据源连接)与 Job(源到目标的迁移),服务端再提交分布式任务。复杂性从各客户端转到共享服务,换取统一接入和更轻的客户端。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据技术体系详解:原理、架构与实践》第2章《关系型数据的收集》2.2–2.3(源文件:_epub-src/OEBPS/text00015.html;_epub-src/OEBPS/text00016.html)
- 结论依据:原文列出 Sqoop1 客户端依赖和安全缺点,再说明 Sqoop2 Server 集中 Connector、元数据与认证,Link 和 Job 分别表示连接器实例及迁移作业。
- 原始内容:Sqoop1要求依赖的软件必须安装在客户端上……引入了Sqoop Server,将所有管理工作放到Server端,包括Connector管理、MySQL/Hadoop相关的客户端、安全认证等……Link:一个Connector实例。……Job:完成数据迁移功能的分布式作业