union all 是包含重复记录的,怎么去重复?

0
union all 是包含重复记录的,删除主键报错,我想是因为事实表里有外键约束,是不是在导入前删除外键,等导入后,再加上外键?或者是导入到临时表里去除重复记录,然后再导入到目标数据仓库吗?请问下,在实际项目里是怎么处理的? 

项目里是怎么处理的呢?
已邀请:
1

天桥下的郑成功 - Hadoop大数据开发工程师、数仓架构师、熟悉数据仓库设计、Hadoop、Spark、HBase、Hive、SSIS等开发 2015-09-08 回答

如果维度表里没有你的数据关联数据, 那么你还有外键约束是写入不进事实表的
你需要再写之前lookup一下

要回复问题请先登录注册