即席查询,查询的数据实时同步ETL应该如何规划?

0
已邀请:
1

andrea_zhou - 咨询顾问、BA 2013-07-15 回答

首先,即席查询≠即时查询。
即席查询,可以理解为让用户能够自助式的做一些不是太复杂的查询,用于去TRY一些他们的想法,和尝试,发现一些数据中的问题,通常,我们需要为他们规划好类似于语义层的,供他们作为资源使用。
而即时查询,则可能是您问的这块,从您提到ETL规划这点推测。
我认为,分析系统中,没有完全的及时,我们时间的之后可以是3分钟、5分钟或者30分钟,这个涉及到客户的实际业务需求。
举个架构例子吧:
在DW中开辟一块区域,不同于其他区域的更新频度,然后结合CDC,迅速处理更新数据,支持“近实时”查询。

要回复问题请先登录注册