SQL Server 性能優化之——T-SQL NOT IN 和 NOT Exists

 

這次介紹一下T-SQL中“Not IN” 和“Not Exists”的優化。

 

Not IN 和 Not Exists 命令 :

有些情況下，需要select/update/delete 操作孤立數據。孤立數據：不存在主表中而存在其關聯表中。

操作這樣的數據，一般第一反應是利用“Not in” 或 “Not Exists”命令。使用Not IN會嚴重影響性能，因為這個命令會逐一檢查每個記錄，就會造成資源緊張，尤其是當對大數據進行更新和刪除操作時，可能導致資源被這些操作鎖住。

 

選擇NOT IN 還是 NOT Exists

現在SQL Server 中有兩個命令可以使用大數據的插入、更新、刪除操作，性能方面比NOT IN有很大的提高，語法簡單比NOT Exists好很多，寫出來的語句看上去很清爽。 現在就請它們閃亮登場，Merge 和 Except。

例子:

首先創建兩個表

 

use [MyTest]
create table Test1 ([id] int, [name] varchar(20))
create table Test2 ([id] int, [name] varchar(20), [address] varchar(100))

 

 

declare @RowC int
declare @Name varchar(20)
set @RowC = 0
while @RowC < 400000
Begin
set @Name = 'TestName' + CAST(@RowC as varchar(10))
insert into Test1(id, name) values(@RowC, @Name)
set @RowC = @RowC+1
end

 

declare @RowC int
declare @Name varchar(20)
declare @Address varchar(100)
set @RowC = 0
while @RowC < 500000
Begin
set @Name = 'TestName' + CAST(@RowC as varchar(10))
set @Address = 'TestAddress' + CAST(@RowC as varchar(10))
insert into Test2([id], [name], [address]) values(@RowC, @Name, @Address)
set @RowC = @RowC+1
end

 

使用Not IN命令Select/update/delete操作：

SELECT [name] FROM Test2 where [name] not in (select [name] from Test1) 2 UPDATE Test2 SET [name] =N'New_Name' where [name] not in (select [name] from Test1) 3 DELETE Test2 FROM Test2 where [name] not in (select [name] from Test1)

 

使用性能更好語法更簡潔的Merge and Except：

 

merge Test2 T using (select name from Test2 except select name from Test1 )S on t.name=s.name
when matched then update SET name=N'New_Name' ;
merge Test2 T using (select name from Test2 except select name from Test1 )S on t.name=s.name
when matched then delete ;
SELECT * FROM Test2 S where not exists (select 1 from Test2 inner join Test1 on Test2.name=Test1.name and Test2.name=s.name)

注意，上面還是有一部分使用了Not Exists：

SELECT name FROM Test2 S where not exists (select 1 from Test2 inner join Test1 on Test2.name=Test1.name and Test2.name=s.name)

 

 

現在需要使用簡潔的Except：

 

select name from Test1 except select name from Test2

 

在這里只是給出了例子，沒有拿出實際的對比數據。但是Merge 和Except 兩個命令在大數據的處理方面的性能，要比

Not IN 好很多，代碼簡潔程度上，要比和Not EXISTS好很多。不管你信不信，反正我信了！！！

 

 上測試數據嘍：Test1中有400000條數據，Test2中有500000條數據其中100000條數據的name是不同

 Select Not IN：18秒

 

Select Except:幾乎沒有花費時間

 

Update Not IN:　19秒

Update Except、Merge:

刪除操作和上面兩個操作時間基本一樣，在這里就不上圖片了。

Not Exists性能上面並沒有比except好多少。在我的測試數據上，兩個幾乎是在1秒以內完成操作的！！！

在次謝謝@徐少俠的評價及意見，希望大家看一下。