一次SQL調(diào)優(yōu)數(shù)據(jù)庫性能問題后的過程(300W)
更新時間:2010年03月30日 14:26:55 作者:
對單表超過300w+數(shù)據(jù)的Web應用程序進行測試后發(fā)現(xiàn)了一些功能、性能問題,采取了以下辦法來進行調(diào)整
將絕大部分的SQL查詢改為存儲過程,這樣的操作毫無疑問可以提高部分性能。
凡是使用“select * from xxx”的操作一律具體到所需字段。
使用join連接2個以上大量數(shù)據(jù)的表,且基礎數(shù)據(jù)表變化不大的查詢一律使用視圖,并為此視圖建立索引。理由來自SQL Server聯(lián)機幫助手冊: “對于標準視圖而言,為每個引用視圖的查詢動態(tài)生成結果集的開銷很大,特別是對于那些涉及對大量行進行復雜處理(如聚合大量數(shù)據(jù)或聯(lián)接許多行)的視圖。如果在查詢中頻繁地引用這類視圖,可通過對視圖創(chuàng)建唯一聚集索引來提高性能。對視圖創(chuàng)建唯一聚集索引后,結果集將存儲在數(shù)據(jù)庫中,就像帶有聚集索引的表一樣。
對視圖創(chuàng)建索引的另一個好處是:優(yōu)化器可以在未直接在 FROM 子句中指定某一視圖的查詢中使用該視圖的索引。這樣一來,可從索引視圖檢索數(shù)據(jù)而無需重新編碼,由此帶來的高效率也使現(xiàn)有查詢獲益?!?
凡是使用 "select count(*) from xxx" 或是"select count(id) from xxx”(此處id為主鍵)的查詢,一律改為”select count(1) from xxx”,理論上采用*來做聚合值,SQL Server會自動尋覓最合適的字段以進行聚合,但這樣仍然會占用系統(tǒng)開銷,即使主鍵也沒有1來得快。
對于多條件的組合查詢,我們一般會寫成”where ((@condition is null) or (condition=@condition))”形式的存儲過程條件來進行查詢,但這樣的操作會因為”is null ”導致性能問題,反復實地檢測后采用了”where 1 = 1 ”,然后根據(jù)條件“IF @condition IS NOT NULL SET @sqlText=@sqlText+' AND Condition=''' + @Condition +'''',最后 “exec sp_executesql @sqlText” 的方式,這樣確實可帶來明顯的性能提升,分析應是”is null ”或”is not null”導致了索引失效,進行了全表掃描。
對使用row_number()函數(shù)的表建立合適的索引,必須要有最合適的索引才能避免重建索引時的全表row_number()運算帶來的性能問題,而且索引的方向也很重要,比如時間類的索引用降序往往比升序性能高。
這個不是性能問題,但也很重要,在存儲過程中應使用scope_identity()函數(shù)來獲得最新的標量,而不是@@Identity這個全局變量,因為@@Identity會受到觸發(fā)器的影響而失去正確值。
凡是使用“select * from xxx”的操作一律具體到所需字段。
使用join連接2個以上大量數(shù)據(jù)的表,且基礎數(shù)據(jù)表變化不大的查詢一律使用視圖,并為此視圖建立索引。理由來自SQL Server聯(lián)機幫助手冊: “對于標準視圖而言,為每個引用視圖的查詢動態(tài)生成結果集的開銷很大,特別是對于那些涉及對大量行進行復雜處理(如聚合大量數(shù)據(jù)或聯(lián)接許多行)的視圖。如果在查詢中頻繁地引用這類視圖,可通過對視圖創(chuàng)建唯一聚集索引來提高性能。對視圖創(chuàng)建唯一聚集索引后,結果集將存儲在數(shù)據(jù)庫中,就像帶有聚集索引的表一樣。
對視圖創(chuàng)建索引的另一個好處是:優(yōu)化器可以在未直接在 FROM 子句中指定某一視圖的查詢中使用該視圖的索引。這樣一來,可從索引視圖檢索數(shù)據(jù)而無需重新編碼,由此帶來的高效率也使現(xiàn)有查詢獲益?!?
凡是使用 "select count(*) from xxx" 或是"select count(id) from xxx”(此處id為主鍵)的查詢,一律改為”select count(1) from xxx”,理論上采用*來做聚合值,SQL Server會自動尋覓最合適的字段以進行聚合,但這樣仍然會占用系統(tǒng)開銷,即使主鍵也沒有1來得快。
對于多條件的組合查詢,我們一般會寫成”where ((@condition is null) or (condition=@condition))”形式的存儲過程條件來進行查詢,但這樣的操作會因為”is null ”導致性能問題,反復實地檢測后采用了”where 1 = 1 ”,然后根據(jù)條件“IF @condition IS NOT NULL SET @sqlText=@sqlText+' AND Condition=''' + @Condition +'''',最后 “exec sp_executesql @sqlText” 的方式,這樣確實可帶來明顯的性能提升,分析應是”is null ”或”is not null”導致了索引失效,進行了全表掃描。
對使用row_number()函數(shù)的表建立合適的索引,必須要有最合適的索引才能避免重建索引時的全表row_number()運算帶來的性能問題,而且索引的方向也很重要,比如時間類的索引用降序往往比升序性能高。
這個不是性能問題,但也很重要,在存儲過程中應使用scope_identity()函數(shù)來獲得最新的標量,而不是@@Identity這個全局變量,因為@@Identity會受到觸發(fā)器的影響而失去正確值。
相關文章
SQL?Server數(shù)據(jù)庫備份和恢復數(shù)據(jù)庫的全過程
最近在功能調(diào)試前需要先將測試數(shù)據(jù)庫備份,然后功能調(diào)試之后再將測試數(shù)據(jù)庫還原,這樣就可以重復的進行功能調(diào)試,這篇文章主要給大家介紹了關于SQL?Server數(shù)據(jù)庫備份和恢復數(shù)據(jù)庫的相關資料,需要的朋友可以參考下2022-06-06
詳解SQL Server如何修改數(shù)據(jù)庫物理文件的存在位置
這篇文章主要給大家介紹了關于SQL Server如何修改數(shù)據(jù)庫物理文件存在位置的相關資料,文中介紹的非常詳細,對大家具有一定的參考學習價值,需要的朋友們下面跟著小編一起來看看吧。2017-06-06
如何將sql執(zhí)行的錯誤消息記錄到本地文件中實現(xiàn)過程
sql語句的錯誤信息都可以在sys.messages表里面找到,下面與大家分享下將sql 執(zhí)行的錯誤消息記錄到本地文件中,不會的朋友可以參考下哈2013-05-05
SQL Server實現(xiàn)用觸發(fā)器捕獲DML操作的會話信息【實例】
下面小編就為大家?guī)硪黄猄QL Server實現(xiàn)用觸發(fā)器捕獲DML操作的會話信息【實例】。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-03-03

