優(yōu)化SQL Server的內存占用之執(zhí)行緩存
對于減少執(zhí)行緩存的占用,主要可以通過使用參數化查詢減少內存占用。
1、使用參數化查詢減少執(zhí)行緩存占用
我們通過如下例子來說明一下使用參數化查詢對緩存占用的影響。為方便試驗,我們使用了一臺沒有其它負載的SQL Server進行如下實驗。
下面的腳本循環(huán)執(zhí)行一個簡單的查詢,共執(zhí)行10000次。
首先,我們清空一下SQL Server已經占用的緩存:
dbcc freeproccache
然后,執(zhí)行腳本:
DECLARE @t datetime
SET @t = getdate()
SET NOCOUNT ON
DECLARE @i INT, @count INT, @sql nvarchar(4000)
SET @i = 20000
WHILE @i <= 30000
BEGIN
SET @sql = 'SELECT @count=count(*) FROM P_Order WHERE MobileNo = ' + cast( @i as varchar(10) )
EXEC sp_executesql @sql ,N'@count INT OUTPUT', @count OUTPUT
SET @i = @i + 1
END
PRINT DATEDIFF( second, @t, current_timestamp )
輸出:
DBCC 執(zhí)行完畢。如果 DBCC 輸出了錯誤信息,請與系統(tǒng)管理員聯(lián)系。
11
使用了11秒完成10000次查詢。
我們看一下SQL Server緩存中所占用的查詢計劃:
Select Count(*) CNT,sum(size_in_bytes) TotalSize
From sys.dm_exec_cached_plans
查詢結果:共有2628條執(zhí)行計劃緩存在SQL Server中。它們所占用的緩存達到:
92172288字節(jié) = 90012KB = 87 MB。
我們也可以使用dbcc memorystatus 命令來檢查SQL Server的執(zhí)行緩存和數據緩存占用。
執(zhí)行結果如下:
我們現在修改一下前面的腳本,然后重新執(zhí)行一下dbcc freeproccache。再執(zhí)行一遍修改后的腳本:
DECLARE @t datetime
SET @t = getdate()
SET NOCOUNT ON
DECLARE @i INT, @count INT, @sql nvarchar(4000)
SET @i = 20000
WHILE @i <= 30000
BEGIN
SET @sql = 'select @count=count(*) FROM P_Order WHERE MobileNo = @i'
EXEC sp_executesql @sql, N'@count int output, @i int', @count OUTPUT, @i
SET @i = @i + 1
END
PRINT DATEDIFF( second, @t, current_timestamp )
輸出:
DBCC 執(zhí)行完畢。如果 DBCC 輸出了錯誤信息,請與系統(tǒng)管理員聯(lián)系。
1
即這次只用1秒鐘即完成了10000次查詢。
我們再看一下sys.dm_exec_cached_plans中的查詢計劃:
Select Count(*) CNT,sum(size_in_bytes) TotalSize From sys.dm_exec_cached_plans
查詢結果:共有4條執(zhí)行計劃被緩存。它們共占用內存: 172032字節(jié) = 168KB。
如果執(zhí)行dbcc memorystatus,則得到結果:
到這里,我們已經看到了一個反差相當明顯的結果。在現實中,這個例子中的前者,正是經常被使用的一種執(zhí)行SQL腳本的方式(例如:在程序中通過合并字符串方式拼成一條SQL語句,然后通過ADO.NET或者ADO方式傳入SQL Server執(zhí)行)。
解釋一下原因:
我們知道,SQL語句在執(zhí)行前首先將被編譯并通過查詢優(yōu)化引擎進行優(yōu)化,從而得到優(yōu)化后的執(zhí)行計劃,然后按照執(zhí)行計劃被執(zhí)行。對于整體相似、僅僅是參數不同的SQL語句,SQL Server可以重用執(zhí)行計劃。但對于不同的SQL語句,SQL Server并不能重復使用以前的執(zhí)行計劃,而是需要重新編譯出一個新的執(zhí)行計劃。同時,SQL Server在內存足夠使用的情況下,此時并不主動清除以前保存的查詢計劃(注:對于長時間不再使用的查詢計劃,SQL Server也會定期清理)。這樣,不同的SQL語句執(zhí)行方式,就將會大大影響SQL Server中存儲的查詢計劃數目。如果限定了SQL Server最大可用內存,則過多無用的執(zhí)行計劃占用,將導致SQL Server可用內存減少,從而在執(zhí)行查詢時尤其是大的查詢時與磁盤發(fā)生更多的內存頁交換。如果沒有限定最大可用內存,則SQL Server由于可用內存減少,從而會占用更多內存。
對此,我們一般可以通過兩種方式實現參數化查詢:一是盡可能使用存儲過程執(zhí)行SQL語句(這在現實中已經成為SQL Server DBA的一條原則),二是使用sp_executesql 方式執(zhí)行單個SQL語句(注意不要像上面的第一個例子那樣使用sp_executesql)。
在現實的同一個軟件系統(tǒng)中,大量的負載類型往往是類似的,所區(qū)別的也只是每次傳入的具體參數值的不同。所以使用參數化查詢是必要和可能的。另外,通過這個例子我們也看到,由于使用了參數化查詢,不僅僅是優(yōu)化了SQL Server內存占用,而且由于能夠重復使用前面被編譯的執(zhí)行計劃,使后面的執(zhí)行不需要再次編譯,最終執(zhí)行10000次查詢總共只使用了1秒鐘時間。
2、檢查并分析SQL Server執(zhí)行緩存中的執(zhí)行計劃
通過上面的介紹,我們可以看到SQL緩存所占用的內存大小。也知道了SQL Server執(zhí)行緩存中的內容主要是各種SQL語句的執(zhí)行計劃。則要對緩存進行優(yōu)化,就可以通過具體分析緩存中的執(zhí)行計劃,看看哪些是有用的、哪些是無用的執(zhí)行計劃來分析和定位問題。
通過查詢DMV: sys.dm_exec_cached_plans,可以了解數據庫中的緩存情況,包括被使用的次數、緩存類型、占用的內存大小等。
SELECT usecounts, cacheobjtype, objtype,size_in_bytes, plan_handle
FROM sys.dm_exec_cached_plans
通過緩存計劃的plan_handle可以查詢到該執(zhí)行計劃詳細信息,包括所對應的SQL語句:
SELECT TOP 100 usecounts,
objtype,
p.size_in_bytes,
[sql].[text]
FROM sys.dm_exec_cached_plans p
OUTER APPLY sys.dm_exec_sql_text (p.plan_handle) sql
ORDER BY usecounts
我們可以選擇針對那些執(zhí)行計劃占用較大內存、而被重用次數較少的SQL語句進行重點分析??雌湔{用方式是否合理。另外,也可以對執(zhí)行計劃被重復使用次數較多的SQL語句進行分析,看其執(zhí)行計劃是否已經經過優(yōu)化。進一步,通過對查詢計劃的分析,還可以根據需要找到系統(tǒng)中最占用IO、CPU時間、執(zhí)行次數最多的一些SQL語句,然后進行相應的調優(yōu)分析。篇幅所限,這里不對此進行過多介紹。讀者可以查閱聯(lián)機叢書中的:sys.dm_exec_query_plan內容得到相關幫助。
附:
1:關于DBCC MEMORY,可以查看微軟的知識庫: http://support.microsoft.com/kb/907877/EN-US
2:關于sys.dm_exec_cached_plans和sys.dm_exec_sql_text,請參閱聯(lián)機叢書。
- SQL語句實現查詢SQL Server內存使用狀況
- SQL Server 數據頁緩沖區(qū)的內存瓶頸分析
- SqlServer如何通過SQL語句獲取處理器(CPU)、內存(Memory)、磁盤(Disk)以及操作系統(tǒng)相關信息
- SQL Server 2008 R2占用cpu、內存越來越大的兩種解決方法
- 解決SQL Server虛擬內存不足情況
- 揭秘SQL Server 2014有哪些新特性(1)-內存數據庫
- 淺談SQL Server 對于內存的管理[圖文]
- SQL Server內存遭遇操作系統(tǒng)進程壓榨案例分析
- SQL Server在AlwaysOn中使用內存表的“踩坑”記錄
- sql server學習基礎之內存初探
相關文章
SQLServer中bigint轉int帶符號時報錯問題解決方法
用一個函數來解決SQLServer中bigint轉int帶符號時報錯問題,經測試可用,有類似問題的朋友可以參考下2014-09-09
基于SQL Server中char,nchar,varchar,nvarchar的使用區(qū)別
對于程序中的一般字符串類型的字段,SQL Server中有char、varchar、nchar、nvarchar四種類型來對應,那么這四種類型有什么區(qū)別呢,這里做一下對比2013-05-05
配置Windows防火墻允許SQL?Server遠程連接的實現
防火墻系統(tǒng)有助于阻止對計算機資源進行未經授權的訪問,?如果防火墻已打開但卻未正確配置,則可能會阻止連接SQL,本文主要介紹了配置Windows防火墻允許SQL?Server遠程連接的實現,感興趣的可以了解一下2024-04-04

