关于ETL的实时性问题

0
目前项目要求,一大部分的数据要实现实时的展现,例如订单一旦下达或者一些环节的改变能实时的在报表查询中看到,关于这一点要如何实现。谢谢
已邀请:
0

逆光 - BI爱好者 关注:数据学习社区 公众号获取更多资料 2014-12-09 回答

实时性很难,建议写个触发器实现实时数据同步!
0

jeffreywang 2014-12-12 回答

看看goldengate数据同步
0

曾力 - 深处互联网四大坑当中~ 2014-12-23 回答

一般两地三中心都有像OGG ,DSG之类的额实时备份灾备软件的,这样主生产的库一般数据都可以同步。

如果你后续有一些汇总表也要实时汇总(一般ogg或者dsg这种实时的数据都只看明细的,不怎么会再往后做汇总处理),那你估计就要写一些定时调度任务了,每5秒或者每1小时拉一次批量等等,这个取决于你这个时间段的数据量大小和跑批时间了。

要回复问题请先登录注册