kettle表对表抽取越来越慢

0
kettle 表对表抽取数据,抽取到四百万的时候,就开始越来越慢,开始每秒能抽取两万五,后面只有几千,执行过程中是不是要清除缓存什么的,是不是下面这个,下面这个有什么作用?谢谢大神告知
QQ图片20151211094207.png

 
已邀请:
0

子建 - Kettle讲师、顾问、数据仓库架构 2015-12-11 回答

这个是用来清除Java虚拟机缓存的,也就是转换执行完成以后,如果虚拟机不自动释放内存使用,执行过程中没效果的,你抽取过程中,和你网络,数据库各方面的有关的,每次提交的数量是一定的
0

haibin1999 2015-12-14 回答

你是不是用了 insertupdate那种组件? 那种东西随着目标表增大,速度越来越慢。 直接insert好像没问题吧

要回复问题请先登录注册