
大数据
Aiden御舟
所谓命运,只是你未曾察觉的自己。
展开
-
Nutch相关框架安装使用最佳指南
Chinese installing and using instruction - The best guidance in installing and using Nutch in China国内首套免费的《Nutch相关框架视频教程》 土豆在线观看地址: http://www.tudou.com/home/item_u106249539s0p1.html超转载 2014-03-11 14:35:14 · 1150 阅读 · 0 评论 -
java操作redis: 将string、list、map、自定义的对象保存到redis中
一、操作string 、list 、map 对象1、引入jar:jedis-2.1.0.jar 2、代码/** * @param args */ public static void main(String[] args) { //连接redis服务 Jedis jedis =转载 2015-01-27 14:51:21 · 26925 阅读 · 0 评论 -
Jedis存储Java对象 - (Java序列化为byte数组方式)
在Jedis开发中,我们很多时候希望直接把一个对象放到Redis中,然后在需要的时候取出来。Redis的key和value都支持二进制安全的字符串,存储Java对象不是问题,下面我们看一下如何来实现。 1要存储的对象现在写一个很土的Java Bean,包含两个字段,id和name,类名叫做Person。为了实现序列化需求,该类实现Serializable接口。pub转载 2015-01-27 14:51:20 · 3964 阅读 · 1 评论 -
redis配置文件详解
# Redis 配置文件# 当配置中需要配置内存大小时,可以使用 1k, 5GB, 4M 等类似的格式,其转换方式如下(不区分大小写)## 1k => 1000 bytes# 1kb => 1024 bytes# 1m => 1000000 bytes# 1mb => 1024*1024 bytes# 1g => 1000000000 bytes# 1gb =>转载 2014-08-05 15:54:19 · 452 阅读 · 0 评论 -
Redis 集群方案
根据一些测试整理出来的一份方案:1. Redis 性能对于redis 的一些简单测试,仅供参考:测试环境:Redhat6.2 , Xeon E5520(4核)*2/8G,1000M网卡Redis 版本:2.6.9 客户端机器使用redis-benchmark 简单GET、SET操作:1. 1单实例测试1. Value大小:10Byte~1390Byte处转载 2015-01-22 14:58:54 · 584 阅读 · 0 评论 -
Jedis连接池的使用
所需jar:jedis-2.1.0.jar和commons-pool-1.5.4.jarJedis操作步骤如下:1->获取Jedis实例需要从JedisPool中获取;2->用完Jedis实例需要返还给JedisPool;3->如果Jedis在使用过程中出错,则也需要还给JedisPool;代码如下:package com.ljq.utils;import re转载 2015-01-28 10:29:42 · 1333 阅读 · 0 评论 -
ActiveMQ持久化方式
ActiveMQ持久化消息持久性对于可靠消息传递来说应该是一种比较好的方法,有了消息持久化,即使发送者和接受者不是同时在线或者消息中心在发送者发送消息后宕机了,在消息中心重新启动后仍然可以将消息发送出去,如果把这种持久化和ReliableMessaging结合起来应该是很好的保证了消息的可靠传送。消息持久性的原理很简单,就是在发送者将消息发送出去后,消息中心首先将消息存储到本地数据文件、内转载 2014-11-05 16:17:45 · 665 阅读 · 0 评论 -
ActiveMQ使用线程池实现消息的生产与消费 .
1。 首先先引入相关的lib包,重点需引用activemq-client-5.8.0.jar,activemq-core-5.7.0.jar,activemq-pool-5.8.0.jar,activemq-protobuf-1.1.jar等包,其他包自行配置。2。 一些公共工具类的代码:JMSProducer.java[java] view pla转载 2014-11-05 16:16:26 · 1542 阅读 · 1 评论 -
ActiveMQ学习教程
背景:ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线。选择ActiveMQ作为JMS的入门学习中间件,是因为其拥有以下优点 1.多种语言和协议编写客户端。语言: Java, C, C++, C#, Ruby, Perl, Python, PHP。应用协议: OpenWire,Stomp REST,WS Notification,XMPP,AMQP转载 2014-08-06 15:47:44 · 1211 阅读 · 0 评论 -
linux安装activeMQ
1.新建一个文件夹activeMQ mkdir /server2.授权 chmod 777 /server3.下载activeMQ安装包,拷贝到/activeMQ目录下apache-activemq-5.6.0-bin.tar.gz,下载地址http://activemq.apache.org/download.html4.解压文件到运行目录/activeServer转载 2014-11-04 15:19:45 · 522 阅读 · 0 评论 -
STORM与HADOOP的比较
对于一堆时刻在增长的数据,如果要统计,可以采取什么方法呢?等数据增长到一定程度的时候,跑一个统计程序进行统计。适用于实时性要求不高的场景。如将数据导到HDFS,再运行一个MAP REDUCE JOB。如果实时性要求高的,上面的方法就不行了。因此就带来第二种方法。在数据每次增长一笔的时候,就进行统计JOB,结果放到DB或搜索引擎的INDEX中。STORM就是完成这种工作的。转载 2014-07-25 09:29:30 · 750 阅读 · 0 评论 -
Redis内存使用优化与存储
Redis常用数据类型Redis最为常用的数据类型主要有以下五种:StringHashListSetSorted set在具体描述这几种数据类型之前,我们先通过一张图了解下Redis内部内存管理中是如何描述这些不同数据类型的:首先Redis内部使用一个redisObject对象来表示所有的key和value,redisObject转载 2015-02-09 14:20:35 · 557 阅读 · 0 评论