2019-09-02

Msql使用储存过程做批量操作

虽然在日常的使用中， 批量操作可以通过sql命令，类似于insert into tab values (select * from anotherTab)这种形式进行批量操作，但是对于大数据量的批量操作来说，在速度执行速度方面会有软肋，而且通过使用存储过程的形式，可以在数据库中定义定时任务执行定义的存储函数（例如定时对昨天的交易数据进行统计等），这个是手动写一个sql无法实现的。

首先，先贴出整个脚本的代码，然后再一行行的进行解析：

CREATE PROCEDURE `update_destTab`(
        in var_begin varchar(30),
        in var_end varchar(30)
)                                 
BEGIN
    DECLARE row_id bigint;
    DECLARE row_chargeFeeTime   varchar(20); 
    DECLARE count INT DEFAULT 0;  
    DECLARE done INT;

DECLARE var_cursor CURSOR FOR
SELECT ah.id, a.chargeFeeTime
FROM demo_destTab ah force index (INDEX_destTab_CREATEDATE), demo_account a 
where ah.accountId = a.id
and ah.CREATEDATE >= str_to_date(var_begin,'%Y%m%d %H:%i:%s')
and ah.CREATEDATE < str_to_date(var_end,'%Y%m%d %H:%i:%s')
and ah.chargeFeeTime is null;

DECLARE CONTINUE HANDLER FOR NOT FOUND SET done=1;

set count=0;

OPEN var_cursor;
cursor_loop:LOOP
FETCH var_cursor INTO row_id,row_chargeFeeTime;

IF done=1 THEN
leave cursor_loop;
END IF;


update demo_destTab set chargeFeeTime=row_chargeFeeTime where id=row_id;

set count=count+1;

if count%2000=0 then 
  commit;
end if;

END LOOP cursor_loop;
CLOSE var_cursor;
commit;
END


set autocommit=0;
CALL demo_rw.update_destTab('20171001 00:00:00','20171101 00:00:00');

• 首先 Create Prodcedure 定义了创建一个存储过程，并定义了接收的参数
• 使用 DECLARE 声明将要使用的变量
• 使用 DECLARE CURSOR FROM 定义了游标，通过游标，可以对自定义的 SELECT 语句获取的数据进行进一步的操作
• DECLARE CONTINUE HANDLER FOR NOT FOUND SET done=1; 这句话的意思是，当游标到达数据聚合末的时候，定义一个结束的标志，这是一个固定的写法
• set count=0; 这句话其实并没什么特定的作用，只是和下面的这一段

if count%2000=0 then
commit;
end if;

当数据打到一定数量的时候进行一个事务的提交，避免数据量太大造成读写的延迟

• OPEN var_cursor; cursor_loop:LOOP FETCH var_cursor INTO row_id,row_chargeFeeTime;
  这三句，打开游标，将游标的数据赋值到开头 DECLARE 定义的变量中，然后对变量进行自定义的操作，在这个脚本中是对数据进行 update
• 最后 END LOOP cursor_loop; 语句，在执行完成后进行游标的关闭以及事务的提交，结束存储过程
• 调用该存储过程，使用 CALL 函数名称(参数。。) 进行调用

展示了一个简单的存储函数的使用方法，通过select捞出数据然后通过update进行数据操作。可以当成一个模板，修改select和update两个语句块，定义需要的变量，根据需要对该函数进行一个扩展。