
BigData
Arrow
在技术上具有Arrow一样的钉子精神
展开
-
大数据(读书笔记)
1. 思维变革 1)更多:不是随机样本,而是全体数据 2)更杂:不是精确性,而是混杂性 3)更好: 不是因果关系,面是相关关系 大数据,改变人类探索世界的方法。2. 商业变革 1)数据化:一切皆可“量化” 2)价值:“取之不尽,用之不竭”的数据创新 3)角色定位:数据、技术与思维的三足鼎立(大数据价值链的构成:大数据掌控公司原创 2015-11-05 09:15:44 · 2162 阅读 · 0 评论 -
Yarn
1. YARN的使命 1) 可扩展性 2) 可维护性 3) 多租户 4) 位置感知 5) 高集群使用率 6) 安全和可审计的操作 7) 可靠性和可用性 8) 对编程模型多样性的支持 9) 灵活的资源模型原创 2016-03-28 09:05:42 · 1028 阅读 · 0 评论 -
使用IntelliJ IDEA 15和Maven创建Java Web项目
1. Maven简介 相对于传统的项目,Maven 下管理和构建的项目真的非常好用和简单,所以这里也强调下,尽量使用此类工具进行项目构建。 它可以管理项目的整个生命周期,常用命令如下: - mvn compile - mvn test - mvn clean - mvn package - mvn install /原创 2016-03-08 09:50:59 · 162796 阅读 · 32 评论 -
Ubuntu12.04 编译 Hadoop 2.6.4 源码
1) 安装JDK1.7 下载JDK 1.7.0_79并解压,然后在.bashrc中设置JAVA_HOME和PATH2) 安装Maven -下载解压,然后配置MAVEN_HOME和PATH -或apt-get install maven -mvn --version (验证)3) 安装依赖库 apt-get install g++ autoc原创 2016-04-01 15:42:08 · 1147 阅读 · 0 评论 -
SpringMVC访问静态资源
SpringMVC访问静态资源转载 2016-03-21 17:26:21 · 1055 阅读 · 0 评论 -
Hadoop 2.6.4配置并运行实例
1. Ubuntu12.04基本设置 1) 设置与Windows共享(通过hgfs) 2) 设置root密码 sudo passwd root 3) 设置root登录 vim /etc/lightdm/lightdm.conf 在最后添加一行:greeter-show-manual-login=true 3) #a原创 2016-03-31 17:54:49 · 7320 阅读 · 0 评论 -
Hadoop简介
1. Hadoop生态圈原创 2016-03-30 15:55:55 · 939 阅读 · 0 评论 -
大数据在线分析处理和常用工具
1. Flume架构原创 2016-04-05 16:24:53 · 4507 阅读 · 0 评论 -
交互式查询
1. OLAP和OLTP的特点 OLAP (联机分析处理) 和 OLTP (联机事务处理) 在查询方面的特点: 1) OLTP 单次查询返回数据量小,但是经常会涉及服务器端简单的聚合操作,要求查询响应速度快,一般应用于在线处理; 2) OLAP 单次查询返回数据量巨大,服务器端进行的处理复杂,经常包含上卷(从细粒度数据向高层的聚合)、下钻(将汇总数据拆分到原创 2016-04-05 18:03:43 · 8076 阅读 · 1 评论 -
JSP学习资料
1. 中文乱码问题1)在jsp页中加入一条语句: 中文显示就正常了。 2)对于从网页中的文本框通过String parameter = request.getParameter(“parameter”);方式获得的字符串,均是8859_1的编码,如果想把它显示在网页上就必须得用parameter = new String(parameter.getBytes(“8859_1原创 2016-03-07 10:32:33 · 2361 阅读 · 0 评论 -
使用IntelliJ IDEA 15和Maven 开发Spring Data JPA + MVC Web应用
1. 准备工作 参见“使用IntelliJ IDEA 15和Maven创建Java Web项目”原创 2016-03-08 15:14:46 · 11838 阅读 · 1 评论 -
MySQL基本知识
1. 常用命令mysql -h 127.0.0.1 -P 3306 -u root -prootmysql -h localhost -P 3306 -u root -proot1)查看当前MySQL服务实例支持的字符集show character set; 2)查看当前MySQL服务实例使用的字符集show variables like 'character%原创 2016-03-01 10:53:18 · 1076 阅读 · 2 评论 -
spring-data-jpa 使用方法
转自:http://blog.youkuaiyun.com/linlinv3/article/details/46605719spring-data-jpa 使用方法1. 什么是spring-data为了简化程序与数据库交互的代码,spring提供了一个现成的dao层框架,spring家族提供的spring-data适用于关系型数据库和nos转载 2016-03-02 16:45:54 · 10266 阅读 · 0 评论 -
使用 Spring Data JPA 简化 JPA 开发
转自:http://www.ibm.com/developerworks/cn/opensource/os-cn-spring-jpa/index.html从一个简单的 JPA 示例开始本文主要讲述 Spring Data JPA,但是为了不至于给 JPA 和 Spring 的初学者造成较大的学习曲线,我们首先从 JPA 开始,简单介绍一个 JPA 示例;接着重构该示例,并转载 2016-03-02 17:47:50 · 2204 阅读 · 1 评论 -
Spring Data JPA简单实例
转自:http://itindex.net/detail/47162-spring-data-jpa我们都知道Spring是一个非常优秀的JavaEE整合框架,它尽可能的减少我们开发的工作量和难度。 在持久层的业务逻辑方面,Spring开源组织又给我们带来了同样优秀的Spring Data JPA。 通常我们写持久层,都是先写一个接口,再写接口对应的实现类,在实现类中进转载 2016-03-03 09:39:52 · 4832 阅读 · 2 评论 -
Spring框架
1. Overview of the Spring Framework转载 2016-03-03 10:03:39 · 875 阅读 · 0 评论 -
Spring Data JPA基本知识
1. Spring Data JPA是什么东东?Spring Data JPA provides support for creating JPA repositories by extending the Spring Data repository interfaces.Spring Data Commons provides the infrastructur原创 2016-03-03 14:18:01 · 1378 阅读 · 0 评论 -
IntelliJ IDEA使用教程
http://wiki.jikexueyuan.com/project/intellij-idea-tutorial/原创 2016-03-04 16:07:32 · 35332 阅读 · 1 评论 -
Spark简介
1. 简介 Apache Spark是自由开源的分布式内存计算平台,目前已经成为 Apache 基金会的顶级项目。该平台可以快速、多计算范式、可靠地处理海量数据,除了基本批处理型外,还支持流计算、图计算、SQL分析和机器学习。原创 2016-04-15 08:48:20 · 987 阅读 · 0 评论