mysql批量插入数据2000条只要289ms

关注

原创最新推荐文章于 2026-07-07 14:09:58 发布 1.9k 阅读 AI 写同款· GEO 优化 ›

mysql快速插入大量数据最近做性能测试，需要模拟生产环境的数据量，在插入mysql百万、千万级数据的时候发现直接使用插入sql效率极低，百度了一翻，找到几种方式，但用下来还是有很快速的方式，推荐第四种。阅读详情

1.创建表

DROP TABLE IF EXISTS user;

CREATE TABLE user
(
	id BIGINT(20) NOT NULL COMMENT '主键ID',
	name VARCHAR(30) NULL DEFAULT NULL COMMENT '姓名',
	age INT(11) NULL DEFAULT NULL COMMENT '年龄',
	email VARCHAR(50) NULL DEFAULT NULL COMMENT '邮箱',
	PRIMARY KEY (id)
);

2.编写java代码


思路，将 插入数据 部分在代码中拼接好，将sql传入代码执行

例如：

INSERT INTO `mybatis_plus_demo`.`tmp_user`(`id`, `name`, `age`, `email`)

select 11,'wang',18,'1021@qq.com' 
union
select 22,'wang',18,'1021@qq.com' 

mysql可以直接select，如果是oracle则要  from dual


java 代码


@RequestMapping("batch")
    public Object get(){
        List<User> list = new ArrayList<>();
        for (int i = 1; i <= 2000; i++) {
            User user = new User();
            user.setId(i);
            user.setAge(i);
            user.setEmail("102@qq.com  " + i);
            user.setName("王某人  " + i);
            list.add(user);
        }
        StringBuilder stringBuilder = new StringBuilder();
        list.forEach(item -> {
            stringBuilder.append("select");
            stringBuilder.append(" ' "+item.getId()+" ', ");
            stringBuilder.append(" ' "+item.getName()+" ', ");
            stringBuilder.append(" ' "+item.getAge()+" ', ");
            stringBuilder.append(" ' "+item.getEmail()+" ' ");
            stringBuilder.append(" union ");
        });
        String sql = stringBuilder.toString();
        sql = sql.substring(0,sql.lastIndexOf("union"));
        return userService.batchUser(sql);
    }

service省去

    <insert id="batchUserBySql" parameterType="string">

        INSERT INTO tmp_user ( id, name, age, email)
        ${batchSql}
    </insert>

3.结果只要 289ms

4.批量update

思路：将需要批量更改的数据先批量入库，采用上面的方式，需要建一张与主表字段一致的临时表，必须要有唯一键能对应上；然后通过联表更新语句实现

4.1创建临时表

DROP TABLE IF EXISTS tmp_user;

CREATE TABLE tmp_user
(
	id BIGINT(20) NOT NULL COMMENT '主键ID',
	name VARCHAR(30) NULL DEFAULT NULL COMMENT '姓名',
	age INT(11) NULL DEFAULT NULL COMMENT '年龄',
	email VARCHAR(50) NULL DEFAULT NULL COMMENT '邮箱',
	PRIMARY KEY (id)
);

插入数据可采用上面的代码.....

4.2联表更新

UPDATE user s
SET s.name = (
  SELECT b.name FROM tmp_user b WHERE s.id = b.id 
),
s.age = (
  SELECT b.age FROM tmp_user b WHERE s.id = b.id 
)
WHERE EXISTS (
  SELECT 1 FROM tmp_user b WHERE s.id = b.id
)

仅用72ms

收录于