mysql 插入百萬條數據

利用mysql內存表插入速度快的特點，先存儲過程在內存表中生成數據，然后再從內存表插入普通表中，MyISAM 插入速度快與 innodb；mysql 5.7

一.創建內存表

CREATE TABLE `user_copy` (
  `id` int(6) NOT NULL AUTO_INCREMENT COMMENT '自增id',
  `name` varchar(50) NOT NULL COMMENT '名稱',
  `pwd` varchar(32) NOT NULL COMMENT '密碼',
  `create_time` datetime DEFAULT NULL COMMENT '創建日期',
  PRIMARY KEY (`id`)
) ENGINE=MEMORY AUTO_INCREMENT=10001 DEFAULT CHARSET=utf8 COMMENT='測試表';

 

二.創建普通表

CREATE TABLE `user_copy` (
  `id` int(6) NOT NULL AUTO_INCREMENT COMMENT '自增id',
  `name` varchar(50) NOT NULL COMMENT '名稱',
  `pwd` varchar(32) NOT NULL COMMENT '密碼',
  `create_time` datetime DEFAULT NULL COMMENT '創建日期',
  PRIMARY KEY (`id`)
) ENGINE=MyISAM AUTO_INCREMENT=10001 DEFAULT CHARSET=utf8 COMMENT='測試表';

 

三.創建一個函數，用於生成隨機字符串，show function status;  查看函數

DELIMITER $$
DROP FUNCTION IF EXISTS rand_str;
-- 如果存在就刪除
create FUNCTION rand_str(strlen SMALLINT ) 
-- 創建函數名 rand_str  參數為返回的長度
RETURNS VARCHAR(255)
-- 返回值
BEGIN
    DECLARE randStr VARCHAR(255) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ1234567890';
--     聲明的字符串
    DECLARE i SMALLINT DEFAULT 0;
-- 聲明 i 循環變量
    DECLARE resultStr VARCHAR(255) DEFAULT '';
-- 聲明返回變量
    WHILE i<strlen DO
        SET resultStr=CONCAT(SUBSTR(randStr,FLOOR(RAND()*LENGTH(randStr))+1,1),resultStr);
        SET i=i+1;
    END WHILE;
    RETURN resultStr;
END $$
DELIMITER ;

調用函數
select rand_str(10)

四.創建存儲過程，show procedure status; 查看存儲過程

DROP PROCEDURE IF EXISTS `add_user`;
DELIMITER $$
CREATE PROCEDURE `add_user`(IN n int)
BEGIN
    DECLARE i int unsigned DEFAULT 0;
    WHILE i < n DO
        INSERT INTO `user_coupy`(name,pwd,create_time) VALUES (rand_str(15),MD5(123456),NOW());
        SET i = i+1;
    END WHILE;
END $$
DELIMITER ;

 

五.調用存儲過程

CALL add_user(1000000);

由於mysql 默認內存允許容量小，會出現如下報錯

   

windows 操作系統 找到 my.ini 修改  ，不同的集成環境，配置會有差別，修改max_heap_table_size = 1024M，或者添加進去即可，重啟mysql，根據電腦性能不能所花時間不一樣，thinkpad 8G 內存 i5 處理器  6分鍾

六.插入到普通表中

INSERT into user SELECT * from user_copy;