
Spark
我会陆续把自己学习Spark的笔记发布在这个博客,希望大家喜欢。内容会包括scala,spark core离线计算,spark sql,spark stream流式计算,kafka分布式消息队列,storm流式框架。
bigzqq
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的match ,case class,actor
问题集锦:01目录正文01match这个比较简单,如下package com.bjsxt.scala/** * 1. _=>是模式匹配中的默认匹配,放在最后 * 2. 模式匹配不仅可以匹配值还可以匹配类型,使用时需要在类型前加一个形式变量。 * 3. 匹配过程中会有值的自动转换,注意类型是不会转换的,比如如果值为1.0 那么不会和Int匹配。 */obje...原创 2019-04-02 20:40:56 · 344 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的String,集合和Trait(06)
问题集锦目录目录1.String2.集合3.trait正文知识点和代码都在黑色的框子中1.Stringscala中的String类用的就是java 中的String这个类。如果有所不同,那就是scala还重写了几个方法罢了。object Lesson_String { def main(args:Array[String])={ val bu...原创 2019-03-27 16:00:36 · 334 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala函数(04,05)
问题集锦正文 /** * 递归函数 * 递归函数必须制定函数的返回值类型 */ def fun(num:Int) :Int = { if(num == 1) num else{ num * fun(num - 1) } } println(fun(3))...原创 2019-03-24 22:03:00 · 198 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala初始/类和对象(01,02,03)
问题集锦01正文01scala与spark scala是spark内核的实现语言,版本对应是这样的spark1.6 对应 scala 2.10实际上scala的更高版本也是可以的。spark1.6需要运行在java1.7上,python2.6上。java1.6到java1.7增添了maven包管理器,java1.7到java1.8增加了lamda表达式。02 scala与j...原创 2019-03-23 19:37:18 · 240 阅读 · 0 评论