怎样做到从mysql 到 Hbase 或Hive的数据实时同步

0
本人要对旧系统产生的数据进行分析,旧系统使用的是mysql数据库,由于数据量比较大,想把它导入到hbase中来进行分析(包括全量跟增量),这种分析的实时性要求比较高.Sqoop的实时性不太好,而且增量更新要求source table要有dataTIme的column才行。有谁知道有没其它更好的方案。
已邀请:
0

zhanmsl - 就一技术男 2016-01-21 回答

旧系统的数据还是一直产生吗?
产生的数据需要实时的同步到hbase中?
1

牟瑞 - 大数据 Hadoop 讲师 Hadoop入门课程地址:http://www.hellobi.com/course/39 有架构师,技术总监,CTO的职位请联系我! 2016-01-30 回答

mysql多大的数据量?没有搞个MySQL的集群?
真要实时性可以考虑监听mysql的bin LOG

要回复问题请先登录注册