0
推荐
1844
阅读
10万级etl批量处理作业调度工具Taskctl Web应用版0元永久授权使用
软件下载：关注公众号：【Taskctl】关键字回复 "领取" 或 "软件" 即可获得认识 Taskctl-webTASKCTL 遵循软件产品标准化的原则，以“专业、专注”为设计理念，结合ETL 调度领域自身的特点，构建了一套直观易 用的 ETL 控制容器调度设计、监控 维护、管理平台 taskctl-web-applicat...
1
推荐
1398
阅读
元数据是什么？举例告诉你哪种方式更适合元数据的录入
元数据，一个简单的定义是描述数据的数据。在企业中，无论哪里有数据，都有相应的元数据。只有存在完整而准确的元数据，我们才能更好地理解数据并充分利用数据的价值。为了让大家更好地了解什么是元数据，TaskCtl小编针对元数据的类型，举例说明什么是元数据。元数据分类元数据管理的范围将涵括数据产生、数据存储、数据...
0
推荐
2028
阅读
数据调度平台etl系统二大种类及其实现方法与流程
什么是调度系统调度系统，更确切地说，作业调度系统（Job Scheduler）或者说工作流调度系统（workflow Scheduler）是任何一个稍微有点规模，不是简单玩玩的大数据开发平台都必不可少的重要组成部分。除了Crontab，Quartz这类偏单机的定时调度程序／库。开源的分布式作业调度系统也有很多，比较知名的比如：oozie，azkaba...
0
推荐
1829
阅读
ETL调度系统及常见工具对比：azkaban、oozie、taskctl
最近遇到了很多正在研究ETL及其工具的伙伴向我们抱怨：同样都在用 Kettle ，起点明明没差异，但为什么别人ETL做的那么快那么好，自己却不断掉坑？其实，类似于像 Kettle 这样开源的工具，已经覆盖了大部分日常工作所需的功能了，直接部署一套就能够解决企业基本的需求。今天我们就先对其中一个比较火热的“App”——调度工具...
0
推荐
1839
阅读
taskctl命令行类（sh、exe、python新增scp）插件升级扩展
转载自： http://www.taskctl.com/forum/detail_129.html 上次写了一个帖子 TASKCTL中不使用代理，通过ssh免密连接执行远程脚本配置（SSH插件扩展）http://www.taskctl.com/forum/detail_122.html 。写完后发现，其实在原本的sh作业类型上改造一下就可以了，同时延伸到以前是用command执行方式的...
0
推荐
1610
阅读
TASKCTL常见问题和解决方法
转载自 TASKCTL部分FAQ--技术交流|业界领先ETL批量调度专家系统安装与维护：A1、安装时环境变量已设置，但安装时依然提示环境变量未设置？答：该问题主要是因为环境变量配置未生效。先检查是否按照安装文档添加了环境变量，安装taskctl需要两个环境变量，如果没有配置，在安装用户根目录下的.bash_profile（不同的...
0
推荐
1605
阅读
taskctl怎么获取脚本返回的字符串值？
在 TASKCTL解决方案资源-->范例:TASKCTL设计主要技术点-->condition，最灵活的控制手段（流程）， 是有简单的提到怎么用的。 分支3和分支4就是通过shell中返回一个字符串做判断，然后再决定该运行那个分支。 通过查看代码设计和对应的shel...
0
推荐
1664
阅读
TASKCTL中不使用代理，通过ssh免密连接执行远程脚本配置（SSH插件扩展）
使用TASKCTL调度服务时，如果需要跨用户或者跨服务器调度可以通过安装taskctl的代理来实现，但有时需要执行作业的服务器上仅仅只有几个脚本，此时再部署代理，就显得有点得不偿失了。我们知道TASKCTL支持任意作业类型的扩展，所以我们是不是可以考虑通过SSH远程连接来执行这些少量的脚本程序。 &...
0
推荐
1631
阅读
taskctl中函数使用及嵌套
在用taskctl的时候，我们会经常使用到自带函数，而且学习taskctl自带函数也是灵活应用taskctl的基础，只有学会用函数才可以完成很多高级的操作，省去写专门的作业来完成一些操作甚至修改一些作业本身来配合调度的使用。可在使用函数时，Designer经常编译报错或者是函数没有达到预期？下面我就把函数使用的一些情况分享给...
0
推荐
1467
阅读
taskctl变量引用问题
在用taskctl的时候，我们会经常使用到变量，可有时候Designer编译会提示变量不存在，有时候又不会，这是为什么呢？下面我就把几种具体的情况分享给大家1、在Designer一般会用到变量的地方大概有 ProgName、Para、ExpPara、Condition、DateType等，其中前四种引用是都需要加$符号才能完成引用，在最后一种DateType中...
1
推荐
1528
阅读
taskctl内置函数getjresult和getjstate的区别和意义
在使用taskctl时，自带例子中有条件分支使用的范例，有时候希望能通过获取上个节点的执行情况来决定是否执行某个节点。这个需求可以通过getjresult在condition条件中判断作业返回值来实现，如以下代码：<condition>if($getjresult('job1')==0) CTL_DOIT else CTL_ING</condition>不过有时候...
0
推荐
1413
阅读
taskctl新增作业类型配置插件时注意事项
昨天参照着 http://www.taskctl.com/forum/detail_96.html在给调度服务新增datax作业类型，配置完成后，在Designer中测试datax类型作业，老是报错 cprundataxjob.sh: line 2: $'\r': command not found cprundataxjob.sh: line 44: syntax error: unexpected end of file ...
0
推荐
1440
阅读
Designer中签出流程提示'被其它用户CheckOut'
转载于 ：http://www.taskctl.com/forum/detail_58.html 这种情况一般是因为Designer异常退出导致的。我们可以通过命令 clearco 来强制签入。1、进入后台ctladmin2、使用listco 命令显示签出的流程3、使用clearco [流程号]好了，现在可以通过Designer正常签出流程了补充：4.5之前的版本需要指定服务器编号为“2”1、...
1
推荐
1675
阅读
taskctl控制容器之定时器个人理解
昨天在用taskctl的定时器遇到些问题，暂停了定时器，去修改了定时器调用的作业，再取消暂停的时候，发现取消暂停的时候，该作业重复调用了很多次。后来在群中群主的详细解答下，终于弄了个半懂，在这里也分享给大家。 Taskctl的控制容器分为两种，一种是流程（子流程），一种是定时...
0
推荐
1554
阅读
taskctl自带工具splitexm功能及使用
继上一次使用的ctlsendevent (向TASKCTL产品核心远程发送事件的应用，用来实现taskctl跨服依赖的实现http://www.taskctl.com/forum/detail_103.html)，最近有在玩splitexm这个小工具，它的主要功能是将流程导出文件以流程为单位进行切分，语法：splitexm[需切分文件名称]。这个有什么用呢，主要是有时候导出的备份是整体...