- 博客(29)
- 收藏
- 关注
原创 解决Perhaps you are running on a JRE rather than a JDK问题
Maven-No compiler is provided in this environment. Perhaps you are running on a JRE rather than a JDK?问题原因:eclipse默认是运行在jre上的,但是maven插件需要使用jdk,因此需要在eclipse修改Installed JRES位置在-->【Window】-->【Pr...
2017-10-13 11:49:25
200
原创 maven不能设置为Dynamic Web Module3.0解决方法
找到\项目名\.setting\文件夹下的 org.eclipse.wst.common.project.facet.core.xml文件。 <?xml version="1.0" encoding="UTF-8"?><faceted-project> <fixed facet="wst.jsdt.web"/> <ins
2017-10-13 11:25:51
225
原创 spark1.2.0伪分布式搭建
1、下载scala2.11.5版本,下载地址为:http://www.scala-lang.org/download/2.11.5.html;2、安装和配置scala:第一步:上传scala安装包 并解压第二步 配置SCALA_HOME环境变量到bash_profile第三步 source 使配置环境变量生效:第四步 验证scala:3、下载spark...
2016-01-13 15:31:51
138
原创 Hadoop2.6.0集群安装
环境本教程使用 Ubuntu 14.04 64位 作为系统环境,基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable) 版本下验证通过,可适合任何 Hadoop 2.x.y 版本,例如 Hadoop 2.7.1,Hadoop 2.4.1 等。本教程简单的使用两个节点作为集群环境: 一个作为 Master 节点,局域网 IP 为 192.168.1.121;另一个作为...
2016-01-08 11:30:47
401
原创 hadoop 2.6.0伪分布式安装
环境本教程使用 Ubuntu 14.04 64位 作为系统环境(Ubuntu 12.04 也行,32位、64位均可),请自行安装系统(可参考使用VirtualBox安装Ubuntu)。如果用的是 CentOS/RedHat 系统,请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。本教程基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable) 版本下验...
2016-01-08 11:28:55
126
原创 Hbase无法启动,报:Address already in use
查看发现是端口被占用,查找占用6000/60020的进程并杀死:1[hadoop@Master logs]$ netstat -apn | grep 600002(Not all processes could be identified, non-owned process info3 will not be shown, you would have to be ro...
2013-05-16 11:05:51
284
原创 hadoop+hbase+zookeeper配置
Hbase -version 0.90.6Hadoop -version 0.20.203 tar zxvf mysql.tar.gz -C /home/aaassh: localhost: Name or service not known 是/etc/hosts在作怪。在/etc/hosts 没有localhost的解析,127.0.0.1 localhost # mu...
2012-07-27 15:32:46
110
原创 通过solr建立数据库索引,并查询
要建立自己的全文检索,一般都需要从数据库导入数据,在原来配置的基础上,增加导入的功能 1、D:\apache-tomcat-7.0.27\solr\conf\solrconfig.xml中增加 <requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">...
2012-06-14 13:51:16
137
原创 solr部署
前提:1.装好JRE和JDK,设置环境变量?JAVA_HOME C:\Program Files\Java\jdk1.7.0_03 JRE_HOME C:\Program Files\Java\jre61.tomcat启动没有问题。tomcat6环境变量?CATALINA_BASE D:...
2012-06-13 09:53:41
96
原创 基于mapreduce的Hadoop join实现分析(一)
对于一个大数据的分析应用,join是必不可少的一项功能.现在很多构建与hadoop之上的应用,如Hive,PIG等在其内部实现了join程序,可以通过很简单的sql语句或者数据操控脚本完成相应的Join工作.那么join应该如何实现呢?今天我们就对join做一个简单的实现.我们来看一个例子,现在有两组数据:一组为单位人员信息,如下:人员ID 人员名称 地址ID1 张三 12 李四 ...
2012-04-26 14:19:58
103
原创 (四)利用Hadoop MapReduce 实现文本单词频率统计
1.Map开发。package com.aa.mapreduce;import java.io.IOException;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.Mapper;public class Wor...
2012-04-26 09:56:42
277
原创 win32下开发hadoop应用程序(二)
(2)在Eclipse中配置开发hadoop程序,下载hadoop-0.20.2-cdh3u1.tar.gz。· Step1. 在eclipse中,新建一个Java 项目,填入Project name,在Contents中,选择 “Create project from existing source”,在 Browse… 中选择hadoop的目录,点击“Next >...
2012-04-26 09:48:04
93
原创 win32下开发hadoop应用程序(一)
(1)安装Cygwin,并设置环境变量到$Cygwin_Home/bin。windows下无法直接运行hadoop,是由于hadoop的节点(Datanode)需要用到linux 的环境命令,比如 df, du 获取磁盘的信息,whoami 获取用户信息等。所以理想方式在 windows 上提供linux 的环境。Cygwin是一个在windows 平台上运行的unix 模拟环境。 ...
2012-04-26 09:43:04
103
原创 jvm 虚拟内存设置
-Xmn512m -Xms1024m -Xmx1024m 在一些规模稍大的应用中,Java虚拟机(JVM)的内存设置尤为重要,想在项目中取得好的效率,GC(垃圾回收)的设置是第一步。 PermGen space:全称是PermanentGenerationspace.就是说是永久保存的区域,用于存放Class和Meta信息,Class在被Load的时候被放入该区域Heapsp...
2012-04-25 16:35:18
238
原创 定义bat文件设置cmd初始目录
e:cd E:\document\Mongodb\mongodb\bincmd /E:ON /V:ON /F:ON /k "%1" %*
2012-04-25 09:13:34
384
原创 windows mongodb 集群
在一台Windows机器下搭建了一个 Replica Sets + Sharding 测试集群环境,以此作为我后续对于Mongodb更进一步学习的实验平台。只有一台windows机器,配置方案:1、3个分片sharding2、每一个分片由3个节点构成1主2备的Replica Sets3、3个配置节点Configsever4、1个路由节点Mongos分片复制集A(三个分片节点构成一个复制集)...
2012-01-19 14:11:25
121
原创 spring的ioc类图
spring在ioc的两个体现:一个是BeanFactory,一个是ApplicationContext。 一、BeanFactory AliasRegistry:提供了注册、删除、获得以及是否是 别名 的方法。BeanDefinitionRegistry:提供了注册、删除、获得以及是否包含 bean的定义 的等方法,并继承了AliasRegistry。...
2012-01-05 08:05:15
140
原创 java mail 发邮件
import java.util.Date;import java.util.Properties;import javax.mail.Message;import javax.mail.Multipart;import javax.mail.Session;import javax.mail.Transport;import javax.mail.internet.InternetAd...
2010-10-28 10:07:10
334
原创 设计模式(22)-Strategy Pattern
一、 策略(Strategy)模式策略模式的用意是针对一组算法,将每一个算法封装到具有共同接口的独立的类中,从而使得它们可以相互替换。策略模式使得算法可以在不影响到客户端的情况下发生变化。假设现在要设计一个贩卖各类书籍的电子商务网站的购物车(Shopping Cat)系统。一个最简单的情况就是把所有货品的单价乘上数量,但是实际情况肯定比这要复杂。比如,本网站可能对所有的教材类图书实行每本一...
2009-10-17 10:17:24
99
原创 设计模式(15)-Facade Pattern
一、 门面(Facade)模式外部与一个子系统的通信必须通过一个统一的门面(Facade)对象进行,这就是门面模式。医院的例子用一个例子进行说明,如果把医院作为一个子系统,按照部门职能,这个系统可以划分为挂号、门诊、划价、化验、收费、取药等。看病的病人要与这些部门打交道,就如同一个子系统的客户端与一个子系统的各个类打交道一样,不是一件容易的事情。首先病人必须先挂号,然后门诊。如果医...
2009-10-17 09:52:57
144
原创 笑话合集(2)
●一道题目要求把以下四句话用关联词连接:1、张海迪姐姐瘫痪了;2、张海迪姐姐顽强地学习;3、张海迪姐姐学会了多门外语;4、张海迪姐姐学会了针灸。正确答案应该是:"张海迪姐姐虽然瘫痪了,但顽强地学习,不仅学会了多门外语,而且还学会了针灸。 结果有一个孩子写:虽然张海迪姐姐顽强地学会了针灸和多门外语,可她还是瘫痪了。 又发现一个更猛的孩子写道:张海迪姐姐不但学会了外语,还学会了针灸,她那么顽强...
2009-10-15 08:05:40
224
原创 笑话合集(1)
●有一次坐公交拿了IC卡排队上车,前面一个人是扔硬币的,我大脑短路跟着把IC卡扔进去了……●邻居忘了带钥匙,从我家阳台翻过去,在屋里找到钥匙后,又翻回来,再打开自家房门。更令人叫绝的是,我自始至终在阳台接应着,未觉有不妥之处。唉,我俩的脑袋肯定被同一个门缝挤过。●某日发现手机不见了,翻遍包包以及屋中各个角落,未果。遂郁闷地跌坐地上,从口袋掏出手机,给大家群发短信:我手机丢了●一次大家打麻将停电了,...
2009-10-15 08:04:47
226
Jboss自启动和优化+解决captcha在linux下不显示
解决captcha在linux下不显示: 提示信息:"Can't connect to X11 window server"这是由于Linux的图形处理需要一个X Server服务器。 解决办法: 1.如果服务器上安装有图形界面,可以通过设置环境变量:DISPALY=127.0.0.1:0.0解决。 2. 如果没有安装图形界面,可以在Java运行时加上参数:-...
2009-10-13 16:45:56
221
Linux上jboss集群配置
集群安装和配置 on Linux环境 2台Redhat server Jboss 4.2.2GA ,Apache 2.2.13,mod_jk1.2.x(负载均衡插件) 架构为 66上配置了apache LoadBalance,两个jboss cluster节点分别在66,112上 Jboss集群负载均衡器配置 原理apache增加mod_jk模块来分发访问请求到后台的...
2009-10-13 16:44:23
145
原创 JAVA中文字符编码问题详解(3)
五、对URL做Encode和Decode 对于request参数的中文乱码问题,个人觉得最好的还是用URLEncode/URLDecode,因为如果你的WEB站点要支持国际化,最好就是保证从IE递送过来的参数永远是正确的UTF-8编码。 在IE端,我们可以用JS脚本来对参数编码:encodeURIComponent(),编码后中文字符便变成了%B4%F3%BC%D2%BA%C3这种形式...
2009-10-13 14:59:51
1436
原创 JAVA中文字符编码问题详解(2)
四、JSP读取request.getParameter里的中文参数后,在页面显示为乱码。 在JAVA的WEB应用中,对request对象里的parameters的中文处理一直是常见也最难搞的一只大怪兽。经常是刚搞定了这边,那边又出了乱码。而导致这种复杂性的,主要是此过程中字符编解码次数非常多,而且无论是浏览器还是WEB服务器特别是TOMCAT总是不能给我们一个比较满意的支持。 首先我们来分...
2009-10-13 14:57:30
125
原创 JAVA中文字符编码问题详解(1)
JAVA中文字符编码问题详解 JAVA的中文字符乱码问题一直很让人头疼。特别是在WEB应用中。网上的分析文章和解决方案都很多,但总是针对某些特定情况的。很多次遇到乱码问题后, 经过极为辛苦的调试和搜索资料后终于解决,满以为自己已经掌握了对付这些字符乱码怪兽的诀窍。可当过段时间,换了个应用或换了个环境,又会碰到那讨厌的火星文,并再次无所适从。于是下决心好好整理一下中文字符编码问题,以方便自...
2009-10-13 14:50:08
134
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人