事务复制-大批量DEL操作

2016-01-28同事讨论删除发布表历史记录，导致订阅端数据滞后N小时。后来询问得知，发布表T只保留最近31天的数据，每天由Job删除31天前的数据，每天的删除量约400-500万条。
默认情况下，在发布端删除400万条记录，这样的DEL将被作为一个大型的、多步骤事务发送到订阅服务器(有400万个命令写入到分发，并发送到订阅服务器)。
如果将删除命令封装成存储过程，并且复制存储过程的执行，则复制将仅发送在订阅服务器上执行存储过程的命令，而不会将所有DEL都写入分发数据库并随后通过网络将它们发送到订阅服务器。
问题的原因已经清晰，“如果在发布服务器上执行一个或多个存储过程并影响已发布的表，请考虑将这些存储过程作为存储过程执行项目包括在发布中。”考虑用下面步骤完成对发布的调整：
1、去掉已有发布表的DEL命令
2、将删除命令封装到存储过程，然后将对存储过程的执行添加到新发布
下面的操作是在自己电脑上测试
去掉已有发布的DEL命令
通过发布属性，去掉对其中一个表的del命令

这个界面操作后，提示标记为重新初始化(修改发布属性，就会提示初始化订阅)

实际情况我希望不标记为重新初始化，同时能不复制delete语句。
在群里请教大菠萝，他提供两种方案：
永久性：维护窗口暂停这个表的写，然后单独创建一个publication(不复制delete命令)，创建不初始化的订阅，然后从之前的publication中踢掉这个表就可以了。
随时性：修改订阅端sp_MSdel_dboCounterData存储过程，把其中涉及delete的部分注释掉，改成return；这样的话，复制命令还是会走到订阅端(复制压力依然存在)，但不会在订阅端应用。
永久性
环境说明：WORK\SQL12(分发服务器)、WORK\SQL08R2(发布服务器+订阅服务器)，发布数据库(ReplT)、发布项目(dbo.CounterData、dbo.CounterData1)、发布名称(Table)、订阅数据库(ReplT2)
以默认的设置配置好满足上述条件的复制，接下来测试永久性操作：
创建一个发布TableNew，添加项目(表dbo.CounterData)，编辑项目属性，不复制delete命令(不需立即创建快照)

创建订阅，不初始化订阅

从之前的发布中删除项目

此时可以测试，分别在从表dbo.CounterData、dbo.CounterData1删除100条数据，在订阅库下查看对应的数据，或复制监视器下查看传送命令历史记录：发布Table传递了1个事务，使用了100个命令，发布TableNew无复制的事务；同时在订阅端可以发现dbo.CounterData没有del，而dbo.CounterData1删除了100条数据。此时原发布Table不包含dbo.CounterData项目，新发布TableNew对dbo.CounterData项目不复制delete语句。
发布存储过程的执行
在发布数据库创建存储过程exec_proc，用于删除发布表dbo.CounterData的历史记录。新建发布Proc，添加项目exec_proc，编辑项目属性，复制存储过程的执行(立即创建快照)

创建订阅，初始化订阅。
上面操作完成后，发布订阅及共享文件夹情况如下：

我们在发布数据库上测试执行存储过程exec_proc，查询窗口显示，(450 行受影响)；复制监视器下查看传送命令历史记录，传递了1个事务，使用了1个命令，复制仅发送在订阅服务器上执行存储过程的命令

如果我们用delete top (100) from [CounterData1]，查询窗口显示，(100 行受影响)；复制监视器下查看传送命令历史记录，传递了1个事务，使用了100个命令

因此针对发布表大批量的操作，建议复制存储过程的执行。
存储过程复制并非适用于所有应用程序。如果对某个项目进行水平筛选，以致发布服务器上存在不同于订阅服务器的行集，那么在这两个服务器上执行同一个存储过程将返回不同的结果。与此类似，如果某个更新基于另一个未复制表的子查询，那么在发布服务器和订阅服务器上同时执行相同的存储过程将返回不同的结果。
去掉已有发布表的DEL命令-随时性
通过修改订阅端sp_MSdel_dboCounterData存储过程，把其中涉及delete的部分注释掉，改成return。随时性，比较灵活，可以改来改去。如果发布端delete的操作比较频繁，对复制还是会有比较大的压力。

--修改后的del过程脚本
ALTER procedure [dbo].[sp_MSdel_dboCounterData]
        @pkc1 int
as
begin  
    return
--    delete [dbo].[CounterData] where [id] = @pkc1 --通过主键删除
--if @@rowcount = 0 --检测是否有对应行，没有则报错
--    if @@microsoftversion>0x07320000
--        exec sp_MSreplraiserror 20598
end  

View Code

对于delete操作中的检测步骤，意义不大。反正是要删除，订阅端没找到对应的行，对于当前记录来说，不会影响的实际业务需求，可以将delete中的检测语句注释。