- 博客(5)
- 收藏
- 关注
原创 Taskctl的定时任务调度
一:Taskctl的任务调度:1.1:业界三种主要定时调度方式:第一种定时+作业主要代表:阿里TBS,国内更多开源。特点:简单,易理解。但作业可管理性差,每个作业缺乏客观的关系表达。第二种定时+作业流程主要代表:专业调度软件TASKCTL\Control-M ; ETL工具kettle\datastage ;国外大数据调度O0ZIE特点:简单,易理解,同时对作业具有一定的结构管理型。...
2018-10-24 17:16:59
2253
原创 任务调度Taskctl的Designer和Mon介绍
一:任务调度利器Taskct安装参考:https://blog.youkuaiyun.com/qq_38797366/article/details/83342554二:设计器Designer介绍2.1:Designer可分为下图几个区域:2.2:基本概念作业、任务的解释:1.在TASKETL中,作业与任务是一个概念2.狭义解释:作业指调度体系控制的最小单位,如一个具体的shell,java程...
2018-10-24 16:25:36
761
原创 Taskctl安装以及简单使用
一:Taskctl简介批量调度自动化技术是大数据时代数据整合后台不可缺少的重要技术。数据是黄金,数据是整个社会乃各企业团体的重要资产,管好数据、用好数据是整个社会的重要命题。想要用好数据,首先就应该管好数据。而批量调度自动化技术,正是管好数据的重要保证。在众多大大小小数据仓库、数据集市以及各种各样的数据池子中,是批量调度自动化技术让大量数据的进出、存放、清洗、过滤、粗加工、细加工等各种各样的工作...
2018-10-24 14:20:19
8875
原创 Kettle定时任务执行(Linux&Windows)和错误总结
Kettle定时任务执行(Linux&Windows)和错误总结环境描述:现在需求要定时地执行kettle的作业任务,自动化地完成ETL工作,kettle运行环境可分为Linux和Windows。解决方案:(Windows)1.1:安装jdk,下载kettle,kettle运行依赖jdk。jdk下载地址:https://www.oracle.com/technetwork/jav...
2018-10-22 17:02:59
12387
原创 Kettle任务调度和监控通知
Kettle任务调度和监控通知环境描述:现在一个项目有很多个job,需要知道哪些ktr或者kjb成功,哪些失败了。Kettle本身自带集群监控工具,但是必须是集群的条件下。详情参考http://www.mamicode.com/info-detail-1980342.html。现在我们要自定义监控任务调度的情况,将job和ktr的运行情况保存在数据库中。问题解决:第一步:数据库环境建立...
2018-10-22 15:26:33
9971
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人