在线更新SQL Server千万级记录的大表

目录

问题描述

某表含有2000万+记录行，80+字段，10+索引，单表含索引数据达27GB

由于某些原因，导致此表中的3个字段需进行更新，同时要求停机时间尽可能的短，相关sql如下：

--停机更新3个字段需耗时80分钟UPDATE big_table SET P1 = 'N', P2 = 'N', P3 = 'N'

问题分析

由于停机执行上述update语句需耗时80分钟，因此考虑使用在线更新方案。分析表的字段内容与含义，发现表存在自增列id。

我们重新理解聚集索引表与堆表，评估update语句对单表的影响：在SQL Server中，执行update语句可能产生阻塞。这里我们使用高频率的update小批量高频度的进行更新可以有效降低阻塞的时间。

解决办法

创建一个视图，并通过job的方式高频度的更新视图上的这３个字段，同时检查更新的执行计划是否通过索引。

详细代码如下：
- 创建一个视图与一个临时表

--创建一个含主键与3个字段内容的视图create view vv asSELECT Id, P1, P2, P3 FROM big_tableGO--创建一个记录更新的临时表create table tmp_values (     ctime datetime primary key default getdate(),    n bigint not null)--插入初始insert  tmp_values (n) values(0) 

• 为了降低SQL Server的阻塞，我们将更新sql代码修改成一个存储过程，然后通过Job去定期执行

--创建更新的存储过程CREATE  PROCEDURE updatevvasbegin     DECLARE @i bigint    DECLARE @num bigint    --每次更新1500条记录    set @num=1500    set @i=(select top 1 n from tmp_values order by ctime desc)     insert  tmp_values (n) values(@num+@i)    update vv set P1='N', P2='N', P3='N'        where id<@i+@num and id>=@iend

注意：这里并没有使用@@rowcount，是由于这个表的内容决定的。

参考资料

１. SQL Server 2008 Locking
http://blogs.technet.com/b/josebda/archive/2009/03/19/sql-server-2008-locking.aspx