ttdata

1、下载Spark  从源代码直接编译 github 下载预编译版本 http://spark.apache.org/downloads.html  2、路径说明 README.md 包含用来入门 Spark 的简单的使用说明。 bin 包含可以用来和 Spark 进行各种方式的交互的

大数据架构和模式  大数据分类和架构简介 如何将大数据分为不同的类别 Divakar Mysore, Shrikant Khupat, 和 Shweta Jain 2014 年 8 月 28 日发布 WeiboGoogle+用电子邮件发送本页面   0 系列内容： 此内

hadoop之HDFS文件操作常有两种方式，命令行方式和JavaAPI方式 一、文件基础管理 1、命令行 hadoop fs -cmd hadoop fs -mkdir  /usr/root  hadoop fs -put README.txt  使用Hadoop的命令put将本地文件README.txt送到HDFS hadoop fs -ls ha

spark 特点 1、计算引擎 生态 Spark Streaming 1、微批量方式的计算和处理，可以用于处理实时的流数据 Spark SQL 1、Spark SQL可以通过JDBC API将Spark数据集暴露出去 Spark MLlib 可扩展的Spark机器学习库，由通用的学习算法和工具组成 Spark GraphX: 图计算和并行图计算的新的（alpha）Spark

1、熟练掌握scala 2、精通spark平台提供给开发者api 3、深入spark内核 4、掌握spark核心框架应用 5、做商业级别的spark项目

摘要：很多人都看过不同类型的书，也接触过很多有关大数据方面的文章，但都是很零散不成系统，对自己也没有起到多大的作用，所以作者第一时间，带大家从整体体系思路上，了解大数据产品设计架构和技术策略。 作者经过研发多个大数据产品，将自己形成关于大数据知识体系的干货分享出来，希望给大家能够快速建立起大数据产品的体系思路，让大家系统性学习和了解有关大数据的设计架构。 很多人都看过不同类型的