Andy

BI 学习,交流

6
推荐
1520
阅读

回首15,展望16

15a.谈了女朋友,买了房b.去了一个地方,放下了那位曾经最爱的她,不想对现女友不公平c. 接触了更多地系统BI的架构体系,业内的知识也水平拓展了d. 很感谢以前的经历,尤其是刚参加工作时,王副理,郭专理,授业解惑之情,铭记于心,   接触的QA,PM,IT技能,过往种种,现在都成为了工作的台阶,使我不只拘泥于...

发表了文章 • 2016-02-02 11:44 • 2 条评论

4
推荐
4213
阅读

KETTLE 批处理调度 监控

最近几天公司 调度改用批处理 ,写了JAVA小程序生成到数据库一张表结合对KETTLE BUG的经验,及专用的批处理,来做的,大家有空提提意见1. 批处理如下,最主要检测 开始 和结束,和LOG中有没有ERROR 2. 根据检查逻辑,运行JAVA程序,生成最终结果到数据库表中,每天只要检查表就可以了分别是配置表和检查结果表,&nb...

发表了文章 • 2016-01-13 18:20 • 3 条评论

1
推荐
2517
阅读

KETTLE 抽取数据 到mysql 的配置问题

前几天KETTLE 往MYSQL 抽取数据在800/s 速度感觉和理论上相差太多,网上搜索了很多,有前辈说到了链接:http://forums.pentaho.com/showthread.php?142217-Table-Output-Performance-MySQL#9mysql insert  cusotomer values(id,name) values(?,?)是这样插入需要配置连接中,useServerPrepStmts=false  re...

发表了文章 • 2016-01-12 14:02 • 0 条评论

3
推荐
8914
阅读

KETTLE WEBSERVICE 调用

上段时间有个需求,是调用 WEBSERVICE  的, 不过最后没满足需求,有兴趣的朋友可以继续研究简单介绍下需求 :通过动态传参,调用webservice 接口方法,返回JSON格式数据    方法:post , 位置:body流程如下:1. 生成记录设置如下,把body,url,para,都作为参数传进去才行  2. 获取数据,设置...

发表了文章 • 2016-01-12 11:30 • 1 条评论

4
推荐
2353
阅读

KETTLE 循环抓分库的数据

接触KETTLE有段时间了,关于最近遇到的一个问题solution和大家分享下(有前辈指导才完成的),代码可以参考附件,desktop.rar需求说明   大表被分成10个库,每个库又分32张表,获取每个库表的数据解决思路:DB的主机名,库名作变量=〉循环获取DB 信息,从表中抓数据,总流程如下1. 拿到DB 的主机名,库名作为集合,...

发表了文章 • 2016-01-12 10:20 • 2 条评论