優(yōu)化人員工作時(shí)免不了要接觸到大數(shù)據(jù)量的問題,下面就將平時(shí)收集的一些關(guān)于大數(shù)據(jù)量的優(yōu)化方法整理記錄一下,也是和大家一起共享哦。
1. 應(yīng)盡量避免在 where 子句中對字段進(jìn)行 null值判斷,否則將導(dǎo)致引擎放棄使用索引而進(jìn)行全表掃描,如:
select id from t where numis null
可以在num上設(shè)置默認(rèn)值0,確保表中num列沒有null值,然后這樣查詢:
select id from t where num=0
2. 應(yīng)盡量避免在 where 子句中使用!=或<>操作符,否則將導(dǎo)致引擎放棄使用索引而進(jìn)行全表掃描。優(yōu)化器將無法通過索引來確定將要命中的行數(shù),因此需要搜索該表的所有行。
3. 應(yīng)盡量避免在 where 子句中使用 or來連接條件,否則將導(dǎo)致引擎放棄使用索引而進(jìn)行全表掃描,如:
select id from t where num=10or num=20
可以這樣查詢:
select id from t where num=10
union all
select id from t where num=20
4. in和 not in也要慎用,因?yàn)閕n會使系統(tǒng)無法使用索引,而只能直接搜索表中的數(shù)據(jù)。如:
select id from t where numin(1,2,3)
對于連續(xù)的數(shù)值,能用 between就不要用 in了:
select id from t where numbetween 1 and 3
5. 盡量避免在索引過的字符數(shù)據(jù)中,使用非打頭字母搜索。這也使得引擎無法利用索引。 見如下例子:
SELECT * FROM T1 WHERE NAME LIKE‘%L%’
SELECT * FROM T1 WHERESUBSTING(NAME,2,1)=’L’
SELECT * FROM T1 WHERE NAME LIKE‘L%’
即使NAME字段建有索引,前兩個(gè)查詢依然無法利用索引完成加快操作,引擎不得不對全表所有數(shù)據(jù)逐條操作來完成任務(wù)。而第三個(gè)查詢能夠使用索引來加快操作。
6. 必要時(shí)強(qiáng)制查詢優(yōu)化器使用某個(gè)索引,如在 where 子句中使用參數(shù),也會導(dǎo)致全表掃描。因?yàn)镾QL只有在運(yùn)行時(shí)才會解析局部變量,但優(yōu)化程序不能將訪問計(jì)劃的選擇推遲到運(yùn)行時(shí);它必須在編譯時(shí)進(jìn)行選擇。然而,如果在編譯時(shí)建立訪問計(jì)劃,變量的值還是未知的,因而無法作為索引選擇的輸入項(xiàng)。如下面語句將進(jìn)行全表掃描:
select id from t where
可以改為強(qiáng)制查詢使用索引:
select id from t with(index(索引名)) where
7. 應(yīng)盡量避免在 where 子句中對字段進(jìn)行表達(dá)式操作,這將導(dǎo)致引擎放棄使用索引而進(jìn)行全表掃描。如:
SELECT* FROM T1 WHERE F1/2=100
應(yīng)改為:
SELECT* FROM T1 WHERE F1=100*2
SELECT *FROM RECORD WHERESUBSTRING(CARD_NO,1,4)=’5378’
應(yīng)改為:
SELECT *FROM RECORD WHERE CARD_NO LIKE ‘5378%’
SELECTmember_number,first_name,last_name FROM members
WHEREDATEDIFF(yy,datofbirth,GETDATE())> 21
應(yīng)改為:
SELECTmember_number,first_name,last_name FROM members
WHEREdateofbirth
即:任何對列的操作都將導(dǎo)致表掃描,它包括數(shù)據(jù)庫函數(shù)、計(jì)算表達(dá)式等等,查詢時(shí)要盡可能將操作移至等號右邊。
8. 應(yīng)盡量避免在where子句中對字段進(jìn)行函數(shù)操作,這將導(dǎo)致引擎放棄使用索引而進(jìn)行全表掃描。如:
select id from t where substring(name,1,3)=’abc’—name
以abc開頭的id
select id from t wheredatediff(day,createdate,’2005-11-30′)=0–‘2005-11-30’
生成的id
應(yīng)改為:
select id from t where name like ‘abc%’
select id from t where createdate>=’2005-11-30’and createdate<‘2005-12-1′
9. 在使用索引字段作為條件時(shí),如果該索引是復(fù)合索引,那么必須使用到該索引中的第一個(gè)字段作為條件時(shí)才能保證系統(tǒng)使用該索引,否則該索引將不會被使用,并且應(yīng)盡可能的讓字段順序與索引順序相一致。
10. 很多時(shí)候用 exists是一個(gè)好的選擇:
selectnum from a where num in(selectnum from b)
用下面的語句替換:
selectnum from a where exists(select 1 from b where num=a.num)
SELECTSUM(T1.C1)FROM T1 WHERE(
(SELECTCOUNT(*)FROM T2 WHERE T2.C2=T1.C2>0)
SELECTSUM(T1.C1) FROM T1WHERE EXISTS(
SELECT *FROM T2 WHERE T2.C2=T1.C2)
兩者產(chǎn)生相同的結(jié)果,但是后者的效率顯然要高于前者。因?yàn)楹笳卟粫a(chǎn)生大量鎖定的表掃描或是索引掃描。
如果你想校驗(yàn)表里是否存在某條紀(jì)錄,不要用count(*)那樣效率很低,而且浪費(fèi)服務(wù)器資源??梢杂肊XISTS代替。如:
IF (SELECTCOUNT(*)FROMtable_name WHEREcolumn_name= ‘xxx’)