ETL软件自带了调度功能,用起来不是挺好的嘛,为什么要单独再使用TASKCTL来调度呢?

0
已邀请:
0

天善小编 - 微信直播问题收集 2015-11-07 回答

TaskCTL: 我觉得首先要以发展的眼光去看待这个问题!
从上个十年的数据大集中开始,到现今大数据应用爆发期,以年计成倍增长的数据需要进行加工处理和调度管控,预计2015年我国就可能突破10EB数据保有量。作业数目越来越多,批量调度方式越来越复杂。当量变引起质变之时,传统的调度技术方式会显得捉襟见肘,处处被动,我们有必要站在更高层次去攻占这个技术壁垒。在整个批量系统项目生命周期中,大家通常最关心的是ETL作业的设计。但是据大多数批量系统项目实施统计,其生命周期的绝大部分时间,实际是批量调度系统在工作。而真正使用批量调度系统本身的则是IT运管人员。一个优秀的调度平台能够快速有效的定位问题,修正问题,降低项目风险,能够轻松应对项目频繁的升级、整合等需求。
0

seng - 从事BI、大数据、数据分析工作 2015-11-07 回答

多系统的集成调度需要第3方工具,当然自己写脚本,简单也是能搞定的。

要回复问题请先登录注册