bbaiggey_bigdata的博客

注:这里的服务器由于用到SSL,需要https协议,别打成 http安装配置:-----https://github.com/bbaiggey/AzkabanInstall介绍Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban定义了一种KV文件格式来建立任务之间的依赖关系，并提供一个易于使用的web

官网：http://azkaban.github.io/1、下载安装包azkaban-web-server-2.5.0.tar.gzazkaban-executor-server-2.5.0.tar.gz2、创建一个名字为azkaban的文件夹，解压缩以上两个文件到azkaban目录3、重命名以上解压之后的文件夹 webserver和executor4、配置webs

https://github.com/alibaba/zeus对海量数据进行处理时，目前大部分公司都采用Hadoop来对数据进行离线处理，但是由于业务场景，经常一个MR或者Hive或者其他形式的任务无法直接完成业务需要，需要任务之间按照特定关系来执行（任务流），例如任务1执行完成之后，才能执行任务2、任务2执行完成之后才能执行任务3和4，在这种情况下需要一套调度系统把各个任务之间的依赖