Redis实战--使用Jedis实现百万数据秒级插入

最新推荐文章于 2022-03-10 21:08:42 发布

公众号-老炮说Java

最新推荐文章于 2022-03-10 21:08:42 发布

阅读量444

点赞数

原文链接：https://www.cnblogs.com/xlecho/p/11886881.html

版权

点击上方蓝色字体，选择“标星公众号”

优质文章，第一时间送达

上一篇：这300G的Java资料是我师傅当年给我的，免费分享给大家

下一篇：这200G的Java实战资料是我师傅当年教我的第二招

作者：xlecho

来源：cnblogs.com/xlecho/p/11886881.html

当我们使用普通方法插入大量数据到Redis的时候，我们发现，我们的插入数据并没有Redis宣传的那么快，号称有10w吞吐量的Redis为什么会在我们插入大量的数据的时候很慢呢？这就是本文要做说明的地方

10w吞吐量，大量插入没有得到体现？

Redis号称有10w的吞吐量，但是我们使用普通方法插入的时候，我们发现并没有达到这样的数据，主要原因是我们插入的时候多次连接操作，创建连接需要时间，同时，一个连接就会由一个数据包，多个数据包的传送网络并不能保证一致，这些都是影响我们大量数据插入性能的。

怎么样实现打完数据秒级插入？

使用Pipeline

实现代码如下：

// 在pom依赖中添加jedis依赖
<dependency>
    <groupId>redis.clients</groupId>
    <artifactId>jedis</artifactId>
    <version>2.9.0</version>
</dependency>

// 使用jedis实现pipeline调用
public static void main(String[] args) {
    Jedis jedis = new Jedis("192.168.222.135", 6379);
    Pipeline pipeline = jedis.pipelined();
    long startTime = System.currentTimeMillis();
    IntStream.range(0, 1000000).forEach(it -> pipeline.set("batch" + it, it + ""));
    pipeline.syncAndReturnAll();
    long endTime = System.currentTimeMillis();
    System.out.println(endTime - startTime);
}

实测插入速度如下：

实现原理

pipeline其实就是在我们的操作中节省了很多的I/O操作，将我们多个get或者set操作的I/O操作变成一个I/O操作，节省了很多的I/O时间。同时，让我们的网络影响I/O数据包传输的问题减到最小。

注意

如果我们的redis有密码，那么我们上面的代码需要加一行设置密码

说句题外话，springboot全家桶技术交流群可以加我微信，但是坑位有限哦，由于忙于工作，有时不能及时回复大家，请多包涵。

猜你喜欢1、程序员正在消失2、使用Redis之前5个必须了解的事情3、带你涨姿势的认识一下 Kafka4、TCP/IP，http，socket，长连接，短连接5、周末手残写了RPC一个框架【附源码】6、Spring 体系常用项目一览7、史上最全的Nginx配置参数中文说明8、快速搭建ELK日志分析系统
强烈推荐一位大佬的公众号

好文章，我在看❤️