← 返回卡片

原书出处

架构真意企业级应用架构设计方法论与实践

11 大数据技术中台 11.2.1 结构化数据采集

核验版本的摘录快照 · 导入于 2026-10-24T10:40:38.370Z

Sqoop是在大数据框架中专门用于采集数据库中数据的组件。它通过JDBC连接数据库,通过SQL查询数据,并将查询到的结果存储到Hive数据库中。由于Sqoop是通过JDBC采集数据的,具有较好的通用性,但数据抽取的性能并不高,因此,要提高采集效率有两种优化措施:提高采集频率,即每日分时段多次采集;或者通过一些特定数据库的数据导出、数据备份、数据日志等方式获取数据,进而获得更高的数据抽取性能。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/架构真意企业级应用架构设计方法论与实践/_epub-src/EPUB/xhtml/chapter146.xhtml

EPUB SHA-256:13f01af9a0c674efd3e6a7a7c416d2e3c799c2599dd92c4516b60c717689afb4