在云计算资源池上自动部署业务应用的大数据平台组件开发实战

最新推荐文章于 2022-07-12 20:51:19 发布

wangruoze

最新推荐文章于 2022-07-12 20:51:19 发布

阅读量539

点赞数

本文链接：https://blog.youkuaiyun.com/wangruoze/article/details/42125579

版权

在云计算提供的分布式资源池构建能够自动部署业务应用的平台组件，该平台组件能够非常简易的被众多的并发终端使用，从而轻而易举的提供业务支持；

尤其是值得注意的是，如果有需要的话，我们的不同业务组件和业务本身可以发生数据和资源的共享，这对于资源和数据的复用，尤其是对于效率的提升是至关重要的。

课程介绍

基于“在资源池上自动部署业务应用的平台组件”的要求，课程包含Spark的架构设计、Spark编程模型、Spark内核框架源码剖析、Spark的广播变量与累加器、Shark的原理和使用、Spark的机器学习、Spark的图计算GraphX、Spark SQL、Spark实时流处理、Spark的优化、Spark on Yarn、JobServer等Spark 1.0.0所有的核心内容

培训对象

1，云计算大数据从业者；

2， Hadoop使用者；

3，系统架构师、系统分析师、高级程序员、资深开发人员；

4，牵涉到大数据处理的数据中心运行、规划、设计负责人；

5，政府机关，金融保险、移动和互联网等大数据来源单位的负责人；

6，高校、科研院所涉及到大数据与分布式数据处理的项目负责人；

7，数据仓库管理人员、建模人员，分析和开发人员、系统管理人员、数据库管理人员以及对数据仓库感兴趣的其他人员；

学员基础

了解面向对象编程；

了解Linux的基本使用；

了解Scala语法

王家林老师

中国目前唯一的移动互联网和云计算大数据集大成者；

云计算大数据Spark亚太研究院院长和首席专家；

Spark亚太研究院院长和首席专家，Spark源码级专家，对Spark潜心研究（2012年1月起）2年多后，在完成了对Spark的13不同版本的源码的彻底研究的同时不断在实际环境中使用Spark的各种特性的基础之上，编写了世界上第一本系统性的Spark书籍并开设了世界上第一个系统性的Spark课程并开设了世界上第一个Spark高端课程（涵盖Spark内核剖析、源码解读、性能优化和商业案例剖析）。Spark源码研究狂热爱好者，醉心于Spark的新型大数据处理模式改造和应用。

Hadoop源码级专家，曾负责某知名公司的类Hadoop框架开发工作，专注于Hadoop一站式解决方案的提供，同时也是云计算分布式大数据处理的最早实践者之一，Hadoop的狂热爱好者，不断的在实践中用Hadoop解决不同领域的大数据的高效处理和存储，现在正负责Hadoop在搜索引擎中的研发等，著有《云计算分布式大数据Hadoop实战高手之路---从零开始》《云计算分布式大数据Hadoop实战高手之路---高手崛起》《云计算分布式大数据Hadoop。实战高手之路---高手之巅》等；

Android架构师、高级工程师、咨询顾问、培训专家；

通晓Android、HTML5、Hadoop，迷恋英语播音和健美；

致力于Android、HTML5、Hadoop的软、硬、云整合的一站式解决方案；

国内最早（2007年）从事于Android系统移植、软硬整合、框架修改、应用程序软件开发以及Android系统测试和应用软件测试的技术专家和技术创业人员之一。

HTML5技术领域的最早实践者（2009年）之一,成功为多个机构实现多款自定义HTML5浏览器，参与某知名的HTML5浏览器研发；

超过10本的IT畅销书作者；

培训内容

第一天

讨论：在资源池上自动部署业务应用的平台组件的几个要素

1，资源池；

2，平台组件；

3，自动部署；