利用MySQL触发器高性能造数据

MySQL 触发器功能比较简单，大部分只用来简单的更新第三方表，今天我来演示下MySQL触发器在造数据方面的功效

CREATE TABLE `tb1` (
 `id` varchar(255) NOT NULL,
 `log_date` date DEFAULT NULL,
 PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 ROW_FORMAT=FIXED

下面是基表结果：

这个是对基表的批量插入存储过程:

CREATE DEFINER = 'root'@'localhost'
PROCEDURE db_myisam.sp_generate_tb1_data(IN cur_1        INT,
	IN f_input      INT,
	IN f_commit_num INT
	-- Stands for which month's date.
)

BEGIN
 DECLARE t_count     INT;
 DECLARE v_log_date DATE;
 DECLARE c_date  DATE DEFAULT '2012-07-01';
 SET t_count = cur_1 + (f_input - 1);
 SET @@autocommit = 0;
 WHILE cur_1 <= t_count
 DO
   IF mod(cur_1, f_commit_num) = 1 THEN
     START TRANSACTION;
   END IF;
   SET v_log_date = date_add(c_date, INTERVAL ceil(rand() * 3) * (ceil(rand() * 15)) DAY);
   INSERT INTO tb1 (id, log_date) VALUES (cur_1, v_log_date);
   IF mod(cur_1, f_commit_num) = 0 THEN
     COMMIT;
   END IF;
   SET cur_1 = cur_1 + 1;
 END WHILE;
 COMMIT;
END

单线程造数据：

mysql> call sp_generate_tb1_data(1,10000000,200);
Query OK, 0 rows affected (8 min 20.00 sec)

1000W行记录花了8分钟多，也就是一个线程每秒插入2W条记录。

mysql> select count(*) from tb1;

+----------+
| count(*) |
+----------+
| 10000000 |
+----------+

1 row in set (34.35 sec)

创建复制表：

create table tb2 like tb1;
create table tb3 like tb1;

这里比较恶心的是多建立了一个表tb3，因为MySQL触发器暂时不支持自己对自己插入。

这个是基于表tb3的后置插入触发器：

CREATE
   DEFINER = 'root'@'localhost'
   TRIGGER db_myisam.ti_tb3_after
   AFTER INSERT
   ON db_myisam.tb3
   FOR EACH ROW
BEGIN
 DECLARE v_cur_1    INT DEFAULT 1;
 DECLARE v_log_date DATE;
 DECLARE c_date     DATE DEFAULT '2012-07-01';
 WHILE v_cur_1 <= 10000000
 DO
   SET v_log_date = date_add(c_date, INTERVAL ceil(rand() * 3) * (ceil(rand() * 15)) DAY);
   INSERT INTO tb2 (id, log_date) VALUES (v_cur_1, v_log_date);
   SET v_cur_1 = v_cur_1 + 1;
 END WHILE;
END

1000W记录花了不到6分钟，也就是一个线程每秒插入大于3W记录。

mysql> insert into tb3 values (2,current_date());
Query OK, 1 row affected (5 min 14.07 sec)

可以看到，速度比存储过程提升了60%左右。
怎么样，很HAPPY吧？

转载请注明：爱开源 » 利用MySQL触发器高性能造数据