原书出处
架构真意企业级应用架构设计方法论与实践
11 大数据技术中台 11.2.1 结构化数据采集
Sqoop是在大数据框架中专门用于采集数据库中数据的组件。它通过JDBC连接数据库,通过SQL查询数据,并将查询到的结果存储到Hive数据库中。由于Sqoop是通过JDBC采集数据的,具有较好的通用性,但数据抽取的性能并不高,因此,要提高采集效率有两种优化措施:提高采集频率,即每日分时段多次采集;或者通过一些特定数据库的数据导出、数据备份、数据日志等方式获取数据,进而获得更高的数据抽取性能。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/架构真意企业级应用架构设计方法论与实践/_epub-src/EPUB/xhtml/chapter146.xhtml
EPUB SHA-256:13f01af9a0c674efd3e6a7a7c416d2e3c799c2599dd92c4516b60c717689afb4