• mysql快速产生百万条随机测试数据


    #如果一条一条插入普通表的话,效率太低下,但内存表插入速度是很快的,可以先建立一张内存表,插入数据后,在导入到普通表中

    CREATE TABLE `vote_record_memory` (  

        `id` INT (11) NOT NULL AUTO_INCREMENT,  

        `user_id` VARCHAR (20) NOT NULL,  

        `vote_id` INT (11) NOT NULL,  

        `group_id` INT (11) NOT NULL,  

        `create_time` datetime NOT NULL,  

        PRIMARY KEY (`id`),  

        KEY `index_id` (`user_id`) USING HASH  

    ) ENGINE = MEMORY AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8

    #创建普通表,参数设置和内存表相同,否则从内存表往普通标导入数据会报错

    CREATE TABLE `vote_record` (  

        `id` INT (11) NOT NULL AUTO_INCREMENT,  

        `user_id` VARCHAR (20) NOT NULL,  

        `vote_id` INT (11) NOT NULL,  

        `group_id` INT (11) NOT NULL,  

        `create_time` datetime NOT NULL,  

        PRIMARY KEY (`id`),  

        KEY `index_user_id` (`user_id`) USING HASH  

    ) ENGINE = INNODB AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8  

    #创建存储函数   产生伪随机码   user_id要用

    CREATE FUNCTION `rand_string`(n INT) RETURNS varchar(255) CHARSET latin1  

    BEGIN   

    DECLARE chars_str varchar(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789';   

    DECLARE return_str varchar(255) DEFAULT '' ;  

    DECLARE i INT DEFAULT 0;   

    WHILE i < n DO   

    SET return_str = concat(return_str,substring(chars_str , FLOOR(1 + RAND()*62 ),1));   

    SET i = i +1;   

    END WHILE;   

    RETURN return_str;   

    END  

     

    #创建存储过程   存储过程是保存起来的可以接受和返回用户提供的参数的 Transact-SQL 语句的集合。 可以创建一个过程供永久使用

    CREATE  PROCEDURE `add_vote_memory`(IN n int)  

    BEGIN    

      DECLARE i INT DEFAULT 1;  

        WHILE (i <= n ) DO  

          INSERT into vote_record_memory  (user_id,vote_id,group_id,create_time ) VALUEs (rand_string(20),FLOOR(RAND() * 1000),FLOOR(RAND() * 100) ,now() );  

                set i=i+1;  

        END WHILE;  

    END  

    #call 就是调用存储过程或者函数,这里调用存储过程1000000

    CALL add_vote_memory(1000000)

    如果报错内存满了,修改my.ini 中max_heap_table_size 个参数即可,如果没有,则加入这句话,windows系统修改位置如下,linux系统,修改my.cnf文件,修改后要重启mysql,修改之前记得备份数据库

    #将内存表中的数据导入普通表

    INSERT into vote_record SELECT * from  vote_record_memory  

    #查看结果

    select * from vote_record_memory ORDER BY id limit 5

     

    select * from vote_record ORDER BY id limit 100000

    不以物喜,不以己悲
  • 相关阅读:
    [C# 基础知识系列]专题六:泛型基础篇——为什么引入泛型
    [C#基础知识系列]专题十七:深入理解动态类型
    [C# 基础知识系列]专题九: 深入理解泛型可变性
    C#网络编程系列文章索引
    [C#基础知识系列]专题十:全面解析可空类型
    [C# 基础知识系列]专题十一:匿名方法解析
    [C# 基础知识系列]专题十六:Linq介绍
    VSTO之旅系列(一):VSTO入门
    [C# 网络编程系列]专题七:UDP编程补充——UDP广播程序的实现
    [C# 网络编程系列]专题四:自定义Web浏览器
  • 原文地址:https://www.cnblogs.com/ylcxBlog/p/7287937.html
Copyright © 2020-2023  润新知