SQL語句優化技術分析
2024-07-21 02:06:00
供稿:網友
 
操作符優化
in 操作符
用in寫出來的sql的優點是比較容易寫及清晰易懂,這比較適合現代軟件開發的風格。
但是用in的sql性能總是比較低的,從oracle執行的步驟來分析用in的sql與不用in的sql有以下區別:
       oracle試圖將其轉換成多個表的連接,如果轉換不成功則先執行in里面的子查詢,再查詢外層的表記錄,如果轉換成功則直接采用多個表的連接方式查詢。由此可見用in的sql至少多了一個轉換的過程。一般的sql都可以轉換成功,但對于含有分組統計等方面的sql就不能轉換了。
       推薦方案:在業務密集的sql當中盡量不采用in操作符。
not in操作符
       此操作是強列推薦不使用的,因為它不能應用表的索引。
       推薦方案:用not exists 或(外連接+判斷為空)方案代替
<> 操作符(不等于)
       不等于操作符是永遠不會用到索引的,因此對它的處理只會產生全表掃描。
推薦方案:用其它相同功能的操作運算代替,如
       a<>0 改為 a>0 or a<0
       a<>’’ 改為 a>’’
is null 或is not null操作(判斷字段是否為空)
       判斷字段是否為空一般是不會應用索引的,因為b樹索引是不索引空值的。
       推薦方案:
用其它相同功能的操作運算代替,如
       a is not null 改為 a>0 或a>’’等。
       不允許字段為空,而用一個缺省值代替空值,如業擴申請中狀態字段不允許為空,缺省為申請。
       建立位圖索引(有分區的表不能建,位圖索引比較難控制,如字段值太多索引會使性能下降,多人更新操作會增加數據塊鎖的現象)
 
> 及 < 操作符(大于或小于操作符)
       大于或小于操作符一般情況下是不用調整的,因為它有索引就會采用索引查找,但有的情況下可以對它進行優化,如一個表有100萬記錄,一個數值型字段a,30萬記錄的a=0,30萬記錄的a=1,39萬記錄的a=2,1萬記錄的a=3。那么執行a>2與a>=3的效果就有很大的區別了,因為a>2時oracle會先找出為2的記錄索引再進行比較,而a>=3時oracle則直接找到=3的記錄索引。
 
like操作符
like操作符可以應用通配符查詢,里面的通配符組合可能達到幾乎是任意的查詢,但是如果用得不好則會產生性能上的問題,如like ‘%5400%’ 這種查詢不會引用索引,而like ‘x5400%’則會引用范圍索引。一個實際例子:用yw_yhjbqk表中營業編號后面的戶標識號可來查詢營業編號 yy_bh like ‘%5400%’ 這個條件會產生全表掃描,如果改成yy_bh like ’x5400%’ or yy_bh like ’b5400%’ 則會利用yy_bh的索引進行兩個范圍的查詢,性能肯定大大提高。
 
union操作符
union在進行表鏈接后會篩選掉重復的記錄,所以在表鏈接后會對所產生的結果集進行排序運算,刪除重復的記錄再返回結果。實際大部分應用中是不會產生重復的記錄,最常見的是過程表與歷史表union。如:
select * from gc_dfys
union
select * from ls_jg_dfys
這個sql在運行時先取出兩個表的結果,再用排序空間進行排序刪除重復的記錄,最后返回結果集,如果表數據量大的話可能會導致用磁盤進行排序。
推薦方案:采用union all操作符替代union,因為union all操作只是簡單的將兩個結果合并后就返回。
select * from gc_dfys
union all
select * from ls_jg_dfys
 
sql書寫的影響
同一功能同一性能不同寫法sql的影響
如一個sql在a程序員寫的為
       select * from zl_yhjbqk
b程序員寫的為
       select * from dlyx.zl_yhjbqk(帶表所有者的前綴)
c程序員寫的為
       select * from dlyx.zlyhjbqk(大寫表名)
d程序員寫的為
       select *  from dlyx.zlyhjbqk(中間多了空格)
 
以上四個sql在oracle分析整理之后產生的結果及執行的時間是一樣的,但是從oracle共享內存sga的原理,可以得出oracle對每個sql 都會對其進行一次分析,并且占用共享內存,如果將sql的字符串及格式寫得完全相同則oracle只會分析一次,共享內存也只會留下一次的分析結果,這不僅可以減少分析sql的時間,而且可以減少共享內存重復的信息,oracle也可以準確統計sql的執行頻率。
 
where后面的條件順序影響
 
where子句后面的條件順序對大數據量表的查詢會產生直接的影響,如
select * from zl_yhjbqk where dy_dj = '1kv以下' and xh_bz=1
select * from zl_yhjbqk where xh_bz=1  and dy_dj = '1kv以下'
以上兩個sql中dy_dj(電壓等級)及xh_bz(銷戶標志)兩個字段都沒進行索引,所以執行的時候都是全表掃描,第一條sql的dy_dj = '1kv以下'條件在記錄集內比率為99%,而xh_bz=1的比率只為0.5%,在進行第一條sql的時候99%條記錄都進行dy_dj及xh_bz的比較,而在進行第二條sql的時候0.5%條記錄都進行dy_dj及xh_bz的比較,以此可以得出第二條sql的cpu占用率明顯比第一條低。
 
查詢表順序的影響
在from后面的表中的列表順序會對sql執行性能影響,在沒有索引及oracle沒有對表進行統計分析的情況下oracle會按表出現的順序進行鏈接,由此因為表的順序不對會產生十分耗服務器資源的數據交叉。(注:如果對表進行了統計分析,oracle會自動先進小表的鏈接,再進行大表的鏈接)
 
sql語句索引的利用
對操作符的優化(見上節)
對條件字段的一些優化
采用函數處理的字段不能利用索引,如:
substr(hbs_bh,1,4)=’5400’,優化處理:hbs_bh like ‘5400%’
trunc(sk_rq)=trunc(sysdate), 優化處理:
sk_rq>=trunc(sysdate) and sk_rq<trunc(sysdate+1)
進行了顯式或隱式的運算的字段不能進行索引,如:
ss_df+20>50,優化處理:ss_df>30
‘x’||hbs_bh>’x5400021452’,優化處理:hbs_bh>’5400021542’
sk_rq+5=sysdate,優化處理:sk_rq=sysdate-5
hbs_bh=5401002554,優化處理:hbs_bh=’ 5401002554’,注:此條件對hbs_bh 進行隱式的to_number轉換,因為hbs_bh字段是字符型。
條件內包括了多個本表的字段運算時不能進行索引,如:
ys_df>cx_df,無法進行優化
qc_bh||kh_bh=’5400250000’,優化處理:qc_bh=’5400’ and kh_bh=’250000’
 
應用oracle的hint(提示)處理
 
提示處理是在oracle產生的sql分析執行路徑不滿意的情況下要用到的。它可以對sql進行以下方面的提示
目標方面的提示:
cost(按成本優化)
rule(按規則優化)
choose(缺省)(oracle自動選擇成本或規則進行優化)
all_rows(所有的行盡快返回)
first_rows(第一行數據盡快返回)
執行方法的提示:
use_nl(使用nested loops方式聯合)
use_merge(使用merge join方式聯合)
use_hash(使用hash join方式聯合)
索引提示:
index(table index)(使用提示的表索引進行查詢)
其它高級提示(如并行處理等等)
 
oracle的提示功能是比較強的功能,也是比較復雜的應用,并且提示只是給oracle執行的一個建議,有時如果出于成本方面的考慮oracle也可能不會按提示進行。根據實踐應用,一般不建議開發人員應用oracle提示,因為各個數據庫及服務器性能情況不一樣,很可能一個地方性能提升了,但另一個地方卻下降了,oracle在sql執行分析方面已經比較成熟,如果分析執行的路徑不對首先應在數據庫結構(主要是索引)、服務器當前性能(共享內存、磁盤文件碎片)、數據庫對象(表、索引)統計信息是否正確這幾方面分析。
 
本文是我初學oracle寫的,有些地方是根據其它參與資料得來,未經過我全面測試,可能有些地方分析不正確, 請網友多多指正!!