全新ETL调度批量管理工具 TASKCTL 8.0 最简安装

104 阅读4分钟

认识 TASKCTL

TASKCTL是成都塔斯克信息技术有限公司,专为批量作业调度自动化打造的,一款敏捷调度工具。产品以 “专业、专注” 为设计理念,结合 ETL 调度技术领域的特点,构建了一套直观易用的 ETL 调度设计、监控 维护、管理平台。可为从业人员提供简便、统一的方法来管理各类复杂作业的调度和监控管理。

TASKCTL通过将企业内部复杂的作业调度依赖关系,进行灵活的统一编排和管理,带来前所未有的简便性。TASKCTL采用全内存计算,基于全事件技术驱动,可简单、快速地对作业进行定义、编排和执行,并生成优化调度执行建议,高效地执行作业调度。TASKCTL主要实现对ETL作业、存储过程、SQL语句、shell脚本、DS作业等多类型作业的自动化编排和调度,既可用于帮助用户轻松构建自动化、规范化批量调度管理平台,也可用于支撑大数据时代下数据流向的调度管理自动化等,形成专门的解决方案。

8.0 总体架构

通过上图了解到,TASKCTL-WEB是 TASKCTL客户端 应用产品系列中重要一员。有三大功能模块:

  • **平台管理(Admin):**平台级配置信息管理。如网络节点管理,作业类型扩展,工程管理,全局变量管理,调度元信息导入导出,用户及权限管理,消息接口管理等。

  • **作业设计(Designer):**作业调度元信息设计。如作业控制容器(定时器/作业流)的管理,作业关系、属性编辑,变量管理,作业组织模块管理等。

  • **运行监控(Monitor):**作业运行监控维护平台。对设计好的调度元信息进行运行监控以及人工操作干预。对运行信息进行查询、统计、分析等。

登陆界面

平台部署的时候,已经确定了调度服务端信息。因此不必再像桌面客户端一样需要输入调度服务端地址。

​如上图所示:输入正确的用户名、密码点击 “登录” 按钮,登录成功后,TASKCTL将根据登录用户进行一系列的初始化操作,加载基本的运行信息。

欢迎界面

​成功登陆后,便可进入软件的首页,分别为产品的三大功能模块 “管理平台(Admin)、设计平台(Designer)、监控平台(Monitor)”,如上图所示。

安装部署

服务端环境安装

安装步骤

第一步:解压安装包:把安装包拷贝到需要安装服务的用户下,解压安装包文件如下:

tar -xvf taskctlforxxxx_x.x.x.tar.gz ----lix系统安装包,不同系统不同安装包

第二步:配置环境变量:在安装用户下进入到.bash_profile或.profile文件中配置环境变量如下:

export TASKCTLDIR=$HOME/task --安装目录
export PATH=$PATH:$TASKCTLDIR/bin:. --执行bin目录

(配置完成后使环境变量生效,<重新登录用户或者用source命令>,以 echo $TASKCTLDIR能打印出环境变量值为准)

第三步:执行安装程序:进入到cirinst目录下,执行inst程序。然后进入字符界面如下图所示:

点击回车键后,安装程序会自动检查用户环境变量,如果TASKCTLDIR环境变量目录存在则继续,否则请按照第二步配置好环境变量再重新安装。检查通过后会出现以下界面:

这里我们选择1典型安装。安装程序会依次安装字符界面客户端、核心调度服务控制节点,并要求输入调度服务节点IP地址和服务节点监听端口号。

  • **IP 地 址:**使用管理员分配给服务节点的IP地址(必须是本机IP地址)
  • 全新B/S 版 TASKCTL 8.0 换装重磅发布使用管理员分配给服务节点的端口号(必须是未被占用端口)

接下来就是是否安装范例,根据自身需要选择后,服务就安装完成并启动了。

应用端安装

安装环境:

安装步骤

1. 环境准备

因为在线应用端基于java开发,需要安装java1.8版本。可以通过java – version 命令查看具体,如下图所示

​2. 步骤

a) 上传并解压安装安装包TASKCTL-web-7.1.zip

b) 进入解压后的目录TASKCTL-web-7.1,执行sh install.sh命令。确定web应用的IP/端口及调度服务端的IP/端口信息。

​c) 执行startup.sh启动web应用。通过Webkit内核的浏览器(**如:**360,chrome等)访问如下地址:http://10.40.0.44:8088

d) 安装过程完毕