- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 Spark快速大数据分析-RDD编程
一.RDD基础 RDD(Resilient Distributed Dataset):弹性分布式数据集 RDD就是一个不可变的分布式对象集合。每个RDD都被分为多个分区,这些分区运行在集群中的不同节点。用户可以通过2中方法创建RDD: 1)读取一个外部数据集 sc.textFile("test.txt") 2)在驱动器程序里分发驱动器程序中的对象集合(比如list和set) sc.pa
2016-12-01 22:24:39
865
原创 Java中遍历Map
方法一:同时获取key和value Map map = new HashMap(); for (Map.Entry entry : map.entrySet()) { System.out.println("Key = " + entry.getKey() + ", Value = " + entry.getValue()); } 方法一延伸 Map map = new Has
2016-11-30 17:03:02
377
原创 Spark快速大数据分析-Spark介绍(一)
一.spark是什么 Spark是一个用来实现快速而通用的集群计算平台,一个围绕速度、易用性和复杂分析构建的大数据处理框架。可以理解spark是用来替代Hadoop中MapReduce而不是替代整个Hadoop,实际上在大部分应用中spark运行在Hadoop的HDFS文件系统当中。但是spark比MapReduce更高效。它可以将Hadoop集群中的应用在内存中的运行速度提升100倍,甚至能够
2016-11-29 20:36:54
3394
转载 java中数据类型转换
1如何将字串 String 转换成整数 int? A. 有两个方法: 1). int i = Integer.parseInt([String]); 或 i = Integer.parseInt([String],[int radix]); 2). int i = Integer.valueOf(my_str).intValue(); 注: 字串转成 Double, Float, Lo
2015-12-24 15:08:39
339
转载 第二章 Spring MVC入门
2.1、Spring Web MVC是什么 Spring Web MVC是一种基于Java的实现了Web MVC设计模式的请求驱动类型的轻量级Web框架,即使用了MVC架构模式的思想,将web层进行职责解耦,基于请求驱动指的就是使用请求-响应模型,框架的目的就是帮助我们简化开发,Spring Web MVC也是要简化我们日常Web开发的。 另外还有一种基于组件的、事件驱动的W
2015-12-23 20:34:03
300
转载 第一章 Web MVC简介 —— SpringMVC
Web MVC简介 1.1、Web开发中的请求-响应模型: 在Web世界里,具体步骤如下: 1、 Web浏览器(如IE)发起请求,如访问http://sishuok.com 2、 Web服务器(如Tomcat)接收请求,处理请求(比如用户新增,则将把用户保存一下),最后产生响应(一般为html)。 3、web服务器处理完成后,返回内容给web客户端(一般
2015-12-18 15:43:12
387
转载 java截取字符串,截串,substring和split,分割字母和数字,正则缝隙
关键字: java截取字符串 截串 substring 需求,把"01:大汽车",分成01和大汽车 有两种做法:一是substring Java代码 package test; public class substringTest { public static void main(String args[]) { String
2015-12-18 15:18:53
4761
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅