各位大神,请叫大家一个问题。SQL 如何把最近变动的数据清洗到DW数据库中,也就是实时数据获取,能否给个解决办法?

0
已邀请:
0

li052468 2016-05-13 回答

如果源表有更新时间字段的话,可以根据这个时间判断取增量,也可以用cdc
0

jjzhangfre - 数仓、ETL 2016-05-14 回答

伪实时吧应该,一般都是按楼上说的方法来的。
1.有时间戳字段,调度按一定平率轮询源表,抽取频率时间范围内数据(不推荐)
 
2.通过触发器创建增量表 ,调度轮询增量表有数据执行ETL过程,执行成功清空增量表
0

年轻人 2017-04-04 回答

什么情况

要回复问题请先登录注册