MySQL快速生成100W条测试数据

最新推荐文章于 2024-05-31 17:27:43 发布

shanchahua123456

最新推荐文章于 2024-05-31 17:27:43 发布

阅读量372

点赞数

分类专栏： mysql

mysql 专栏收录该内容

7 篇文章

订阅专栏

博客介绍了利用MySQL内存表插入速度快的特点来生成数据的思路。先在内存表中通过函数和存储过程生成数据，再插入普通表。还提及创建普通表、内存表、函数及存储过程，调用存储过程时内存不足在wind8.1中的解决办法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

原文 https://blog.youkuaiyun.com/qq_16946803/article/details/81870174

1、生成思路
利用mysql内存表插入速度快的特点，先利用函数和存储过程在内存表中生成数据，然后再从内存表插入普通表中

2、创建普通表及内存表

普通表
CREATE TABLE `vote_record` (
    `id` INT (11) NOT NULL AUTO_INCREMENT,
    `user_id` VARCHAR (20) NOT NULL,
    `vote_id` INT (11) NOT NULL,
    `group_id` INT (11) NOT NULL,
    `create_time` datetime NOT NULL,
    PRIMARY KEY (`id`),
    KEY `index_user_id` (`user_id`) USING HASH
) ENGINE = INNODB AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8
内存表
CREATE TABLE `vote_record_memory` (
    `id` INT (11) NOT NULL AUTO_INCREMENT,
    `user_id` VARCHAR (20) NOT NULL,
    `vote_id` INT (11) NOT NULL,
    `group_id` INT (11) NOT NULL,
    `create_time` datetime NOT NULL,
    PRIMARY KEY (`id`),
    KEY `index_id` (`user_id`) USING HASH
) ENGINE = MEMORY AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8

3、创建函数及存储过程

CREATE FUNCTION `rand_string`(n INT) RETURNS varchar(255) CHARSET latin1
READS SQL DATA
BEGIN 
DECLARE chars_str varchar(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789'; 
DECLARE return_str varchar(255) DEFAULT '' ;
DECLARE i INT DEFAULT 0; 
WHILE i < n DO 
SET return_str = concat(return_str,substring(chars_str , FLOOR(1 + RAND()*62 ),1)); 
SET i = i +1; 
END WHILE; 
RETURN return_str; 
END
CREATE  PROCEDURE `add_vote_memory`(IN n int)
BEGIN  
  DECLARE i INT DEFAULT 1;
    WHILE (i <= n ) DO
      INSERT into vote_record_memory  (user_id,vote_id,group_id,create_time ) VALUEs (rand_string(20),FLOOR(RAND() * 1000),FLOOR(RAND() * 100) ,now() );
            set i=i+1;
    END WHILE;
END

没有 READS SQL DATA 报错误码1418 https://blog.youkuaiyun.com/yown/article/details/52511926

4、调用存储过程（生成内存表数据）

CALL add_vote_memory(1000000)

如果内存不足，可以缩小单次生成数量为10万，每次清空vote_record_memory后，再生成

如果内存不足，wind8.1中添加一下两段代码。路径为 C:\ProgramData\MySQL\MySQL Server 5.7

tmp_table_size=1G
max_heap_table_size = 1G

5、插入普通表中

INSERT into vote_record 
SELECT * from  vote_record_memory

#delete  from vote_record_memory