Redis集群(八)：Redis Sharding集群

一、Redis目前的集群方案主要有两种：Redis Sharding和Redis Cluster

1、 Redis Sharding：3.0以前基本上使用分片实现集群，目前主流方案，客户端实现

2、 Redis Cluster：3.0后官方提供了集群方案，2015年4月发布，目前大型应用验证较少，服务端实现

上面两种方案的区别请见：

https://www.zhihu.com/question/21419897

二、下面只说明使用Jedis实现Redis Sharding的方案

Redis Sharding特点：

1. 客户端实现
2. 各个Redis节点独立，之间无关系
3. 某个Redis节点挂了，整个集群不可用，所以需要对每个节点做主从备份
4. 主从备份方案一般通过读写分离设置，每个master至少两个slaver，只有这样master挂掉后，才能选举其中一个Slaver成为新的master，原来master节点加入集群后成为新master的slaver节点
5. redis主从切换对客户端jedis使用时透明的，即redis发生了主从切换并不影响jedis的使用

缺点：

1. 节点扩展和收缩不友好

三、Redis服务集群的搭建

1. Redis集群的搭建可参考文章：搭建3个master-slaver的主从配置
   http://www.cnblogs.com/gossip/p/5992716.html
   http://www.cnblogs.com/gossip/p/5992821.html
2. 注意：一般会搭建3个master节点，每个master挂2个slaver，各个master之间并无联系。Redis Cluster的方案是所有master有联系并进行心跳通信，和Redis Sharding不一样

四、Jedis客户端的使用

1. 版本：2.9.0
2. 实现代码

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76

import redis.clients.jedis.*; import redis.clients.util.JedisClusterCRC16;   import java.util.ArrayList; import java.util.Date; import java.util.List;   public class ShardingTest {        private static String ip = "127.0.0.1" ;      private static int timeout = 10000 ;        public static void main(String[] args) {          JedisPoolConfig poolConfig = getPoolConfig();            List<JedisShardInfo> listRedis = getListSherdInfo();            ShardedJedisPool jedisPool = new ShardedJedisPool(poolConfig, listRedis);            ShardedJedis jedis = jedisPool.getResource();            testData(jedis);          //initString(jedis);          //initHash(jedis);                    //17秒          //initHashPipeline(jedis);              //0秒（是的，0秒）          System.out.println(jedis.get( "k1" ));          System.out.println(jedis.hgetAll( "product2" ));          //initHashPipeline100000(jedis);    //100000 总时间  63秒            jedis.close();          jedisPool.destroy();        }        private static JedisPoolConfig getPoolConfig() {          JedisPoolConfig poolConfig = new JedisPoolConfig();          poolConfig.setMaxTotal( 200 );          poolConfig.setMaxIdle( 30 );            //就是在进行borrowObject进行处理时，对拿到的connection进行validateObject校验          //poolConfig.setTestOnBorrow(true);          //就是在进行returnObject对返回的connection进行validateObject校验，个人觉得对数据库连接池的管理意义不大          //poolConfig.setTestOnReturn(true);          //GenericObjectPool中针对pool管理，起了一个Evict的TimerTask定时线程进行控制(可通过设置参数          //poolConfig.setTestWhileIdle(true);          return poolConfig;      }        private static List<JedisShardInfo> getListSherdInfo() {          JedisShardInfo redis1 = new JedisShardInfo(ip, 9111 );          redis1.setConnectionTimeout(timeout);            JedisShardInfo redis2 = new JedisShardInfo(ip, 9112 );          redis2.setConnectionTimeout(timeout);            JedisShardInfo redis3 = new JedisShardInfo(ip, 9113 );          redis3.setConnectionTimeout(timeout);            List<JedisShardInfo> listRedis = new ArrayList<JedisShardInfo>();          listRedis.add(redis1);          listRedis.add(redis2);          listRedis.add(redis3);            return listRedis;      }        private static void testData(ShardedJedis jedis) {          String key = "k5" ;          String value = "v5" ;          jedis.set(key, value);            System.out.println( "key:" + jedis.get(key));          System.out.println( "key：" + JedisClusterCRC16.getSlot(key));          System.out.println(jedis.type(key));      }      }