原书出处
程序员的底层思维
业务发生的最大时间,然后去业务系统中获取
大于这个最大时间的增量记录。利用业务系统的时间戳,通过数据偏移量(offset)实现数据增量抽取的目的。 2.数据转换 数据仓库一般分为ODS和DW两部分,通常的做法是首先从业务系统到ODS做数据清洗,将脏数据和不完整数据过滤掉,再从ODS到DW的过程中做数据转换,对一
些业务规则进行计算和聚合。 数据清洗是指
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/程序员的底层思维/_epub-src/Cheng Xu Yuan De Di Ceng Si Wei_split_020.html
EPUB SHA-256:b4cb0b45d2514714cab13736867075a5ece7e1c68d26af28cefd42053e97a96c