小坏说后端

大数据之Scala 函数式编程完整使用一、函数式编程1）面向对象编程2）函数式编程3）在 Scala 中函数式编程和面向对象编程完美融合在一起了。二、函数基础1、函数基本语法1）基本语法2）案例实操3)测试demo2、函数和方法的区别1）核心概念2）案例实操3、函数定义1）函数定义2）案例实操3、函数参数1）案例实操3、函数至简原则（重点）1）至简原则细节2）案例实操三、函数高级1、高阶函数1）函数可以作为值进行传递2）函数可以作为参数进行传递3）函数可以作为函数返回值返回2、匿名函数1）说明2）案例实操

大数据之Azkaban 进阶邮箱和电话告警完整使用一 、Azkaban 进阶1 JavaProcess 作业类型案例1）新建一个 azkaban 的 maven 工程2）创建包名：com.atguigu3）创建 AzTest 类4）打包成 jar 包 azkaban-1.0-SNAPSHOT.jar5）新建 testJava.flow，内容如下 一 、Azkaban 进阶 1 JavaProcess 作业类型案例 JavaProcess 类型可以运行一个自定义主类方法，type 类型为 javaproces

大数据之Azkaban 概论完整使用一 集群模式安装1 上传 tar 包二级目录三级目录 一 集群模式安装 1 上传 tar 包 1）将 azkaban-db-3.84.4.tar.gz，azkaban-exec-server-3.84.4.tar.gz，azkaban-webserver-3.84.4.tar.gz 上传到 hadoop102 的/opt/software 路径 [atguigu@hadoop102 software]$ ll 总用量 35572 -rw-r--r--. 1 atguig

大数据之Azkaban 概论一、为什么需要工作流调度系统二、常见工作流调度系统三 、Azkaban 与 Oozie 对比 一、为什么需要工作流调度系统 1）一个完整的数据分析系统通常都是由大量任务单元组成： Shell 脚本程序，Java 程序，MapReduce 程序、Hive 脚本等 2）各任务单元之间存在时间先后及前后依赖关系 3）为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行； 为什么需要工作流调度系统 二、常见工作流调度系统 1）简单的任务调度：直接使用 Li