資料庫經典文章！（必備）

預存程序編寫經驗和最佳化措施

介紹：在資料庫的開發過程中，經常會遇到複雜的商務邏輯和對資料庫的操作，這個時候就會用SP來封裝資料庫操作。如果項目的SP較多，書寫又沒有一定的規範，將會影響以後的系統維護困難和大SP邏輯的難以理解，另外如果資料庫的資料量大或者項目對SP的效能要求很，就會遇到最佳化的問題，否則速度有可能很慢，經過親身經驗，一個經過最佳化過的SP要比一個效能差的SP的效率甚至高几百倍。

內容：

1、開發人員如果用到其他庫的Table或View，務必在當前庫中建立View來實現跨庫操作，最好不要直接使用“databse.dbo.table_name”，因為sp_depends不能顯示出該SP所使用的跨庫table或view，不方便校正。

2、開發人員在提交SP前，必須已經使用set showplan on分析過查詢計劃，做過自身的查詢最佳化檢查。

3、高程式運行效率，最佳化應用程式，在SP編寫過程中應該注意以下幾點：

a)        SQL的使用規範：

i.  盡量避免大事務操作，慎用holdlock子句，提高系統並發能力。
ii. 盡量避免反覆訪問同一張或幾張表，尤其是資料量較大的表，可以考慮先根據條件提取資料到暫存資料表中，然後再做串連。
iii.盡量避免使用遊標，因為遊標的效率較差，如果遊標操作的資料超過1萬行，那麼就應該改寫；如果使用了遊標，就要盡量避免在遊標迴圈中再進行表串連的操作。
iv. 注意where字句寫法，必須考慮語句順序，應該根據索引順序、範圍大小來確定條件子句的前後順序，儘可能的讓欄位順序與索引順序相一致，範圍從大到小。
v.  不要在where子句中的“=”左邊進行函數、算術運算或其他運算式運算，否則系統將可能無法正確使用索引。
vi. 盡量使用exists代替select count(1)來判斷是否存在記錄，count函數只有在統計表中所有行數時使用，而且count(1)比count(*)更有效率。
vii.盡量使用“>=”，不要使用“>”。
viii.注意一些or子句和union子句之間的替換
ix.注意表之間串連的資料類型，避免不同類型資料之間的串連。
x. 注意預存程序中參數和資料類型的關係。
xi.注意insert、update操作的資料量，防止與其他應用衝突。如果資料量超過200個資料頁面（400k），那麼系統將會進行鎖定擴大，頁級鎖會升級成表級鎖。

b) 索引的使用規範：
i.  索引的建立要與應用結合考慮，建議大的OLTP表不要超過6個索引。
ii. 儘可能的使用索引欄位作為查詢條件，尤其是聚簇索引，必要時可以通過index index_name來強制指定索引
iii.避免對大表查詢時進行table scan，必要時考慮建立索引。
iv. 在使用索引欄位作為條件時，如果該索引是聯合索引，那麼必須使用到該索引中的第一個欄位作為條件時才能保證系統使用該索引，否則該索引將不會被使用。
v.  要注意索引的維護，周期性重建索引，重新編譯預存程序。

c)tempdb的使用規範：
i.  盡量避免使用distinct、order by、group by、having、join、cumpute，因為這些語句會加重tempdb的負擔。
ii. 避免頻繁建立和刪除暫存資料表，減少系統資料表資源的消耗。
iii.在建立暫存資料表時，如果一次性插入資料量很大，那麼可以使用select into代替create table，避免log，提高速度；如果資料量不大，為了緩和系統資料表的資源，建議先create table，然後insert。
iv. 如果暫存資料表的資料量較大，需要建立索引，那麼應該將建立暫存資料表和建立索引的過程放在單獨一個子預存程序中，這樣才能保證系統能夠很好的使用到該暫存資料表的索引。
v.  如果使用到了暫存資料表，在預存程序的最後務必將所有的暫存資料表顯式刪除，先truncate table，然後drop table，這樣可以避免系統資料表的較長時間鎖定。
vi. 慎用大的暫存資料表與其他大表的串連查詢和修改，減低系統資料表負擔，因為這種操作會在一條語句中多次使用tempdb的系統資料表。

d)合理的演算法使用：
根據上面已提到的SQL最佳化技術和ASE Tuning手冊中的SQL最佳化內容,結合實際應用,採用多種演算法進行比較,以獲得消耗資源最少、效率最高的方法。具體可用ASE調優命令：set statistics io on, set statistics time on , set showplan on 等。

--------------------------------------------------------------------------

--------------------------------------------------------------------------

全文索引——CONTAINS 文法
我們通常在 WHERE 子句中使用 CONTAINS ，就象這樣：SELECT * FROM table_name WHERE CONTAINS(fullText_column,'search contents')。

我們通過例子來學習，假設有表 students，其中的 address 是全文本檢索的列。
1. 查詢住址在北京的學生
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, 'beijing' )
remark: beijing是一個單詞，要用單引號括起來。

2. 查詢住址在河北省的學生
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, '"HEIBEI province"' )
remark: HEBEI province是一個片語，在單引號裡還要用雙引號括起來。

3. 查詢住址在河北省或北京的學生
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, '"HEIBEI province" OR beijing' )
remark: 可以指定邏輯操作符(包括 AND ，AND NOT，OR )。

4. 查詢有 '南京路' 字樣的地址
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, 'nanjing NEAR road' )
remark: 上面的查詢將返回包含 'nanjing road'，'nanjing east road'，'nanjing west road' 等字樣的地址。
          A NEAR B，就表示條件： A 靠近 B。

5. 查詢以 '湖' 開頭的地址
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, '"hu*"' )
remark: 上面的查詢將返回包含 'hubei'，'hunan' 等字樣的地址。
          記住是 *，不是 %。

6. 類似加權的查詢
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, 'ISABOUT (city weight (.8), county wright (.4))' )
remark: ISABOUT 是這種查詢的關鍵字，weight 指定了一個介於 0~1之間的數，類似係數(我的理解)。表示不同條件有不同的側重。

7. 單詞的多態查詢
SELECT student_id,student_name
FROM students
WHERE CONTAINS( address, 'FORMSOF (INFLECTIONAL,street)' )
remark: 查詢將返回包含 'street'，'streets'等字樣的地址。
         對於動詞將返回它的不同的時態，如：dry，將返回 dry，dried，drying 等等。

---------------------------------------------------------

---------------------------------------------------------

1.按姓氏筆畫排序:
Select * From TableName Order By CustomerName Collate Chinese_PRC_Stroke_ci_as

2.資料庫加密:
select encrypt('原始密碼')
select pwdencrypt('原始密碼')
select pwdcompare('原始密碼','加密後密碼') = 1--相同；否則不相同 encrypt('原始密碼')
select pwdencrypt('原始密碼')
select pwdcompare('原始密碼','加密後密碼') = 1--相同；否則不相同

3.取回表中欄位:
declare @list varchar(1000),@sql nvarchar(1000)
select @list=@list+','+b.name from sysobjects a,syscolumns b where a.id=b.id and a.name='表A'
set @sql='select '+right(@list,len(@list)-1)+' from 表A'
exec (@sql)

4.查看硬碟分區:
EXEC master..xp_fixeddrives

5.比較A,B表是否相等:
if (select checksum_agg(binary_checksum(*)) from A)
    =
   (select checksum_agg(binary_checksum(*)) from B)
print '相等'
else
print '不相等'

6.殺掉所有的事件探察器進程:
DECLARE hcforeach CURSOR GLOBAL FOR SELECT 'kill '+RTRIM(spid) FROM master.dbo.sysprocesses
WHERE program_name IN('SQL profiler',N'SQL 事件探查器')
EXEC sp_msforeach_worker '?'

7.記錄搜尋:
開頭到N條記錄
Select Top N * From 表
-------------------------------
N到M條記錄(要有主索引ID)
Select Top M-N * From 表 Where ID in (Select Top M ID From 表) Order by ID  Desc
----------------------------------
N到結尾記錄
Select Top N * From 表 Order by ID Desc

8.如何修改資料庫的名稱:
sp_renamedb 'old_name', 'new_name' 

9：擷取當前資料庫中的所有使用者表
select Name from sysobjects where xtype='u' and status>=0

10：擷取某一個表的所有欄位
select name from syscolumns where id=object_id('表名')

11：查看與某一個表相關的視圖、預存程序、函數
select a.* from sysobjects a, syscomments b where a.id = b.id and b.text like '%表名%'

12：查看當前資料庫中所有預存程序
select name as 預存程序名稱 from sysobjects where xtype='P'

13：查詢使用者建立的所有資料庫
select * from master..sysdatabases D where sid not in(select sid from master..syslogins where name='sa')
或者
select dbid, name AS DB_NAME from master..sysdatabases where sid <> 0x01

14：查詢某一個表的欄位和資料類型
select column_name,data_type from information_schema.columns
where table_name = '表名'

[n].[標題]:
Select * From TableName Order By CustomerName 

[n].[標題]:
Select * From TableName Order By CustomerName 

--------------------------------------------------------------------------------------

--------------------------------------------------------------------------------------

Sql最佳化是一項複雜的工作，以下的一些基本原則是本人看書時所記錄下來的，很明確且沒什麼廢話：

1． 索引的使用：

（1）.當插入的資料為資料表中的記錄數量的10%以上，首先需要刪除該表的索引來提高資料的插入效率，當資料插入後，再建立索引。

（2）.避免在索引列上使用函數或計算，在where子句中，如果索引是函數的一部分，最佳化器將不再使用索引而使用全表掃描。如：

低效：select * from dept where sal*12 >2500;

高效：select * from dept where sal>2500/12;

(3).避免在索引列上使用not和“!=”，索引只能告訴什麼存在於表中，而不能告訴什麼不存在於表中，當資料庫遇到not 和“!=”時，就會停止使用索引而去執行全表掃描。

(4).索引列上>=代替>

 低效：select * from emp where deptno > 3

 高效：select * from emp where deptno >=4

兩者的區別在於，前者dbms將直接跳到第一個deptno等於4的記錄，而後者將首先定位到deptno等於3的記錄並且向前掃描到第一個deptno大於3的。

(5).非要對一個使用函數的列啟用索引，基於函數的索引是一個較好的方案。

2. 遊標的使用：

   當在海量的資料表中進行資料的刪除、更新、插入操作時，用遊標處理的效率是最慢的，但是遊標又是必不可少的，所以正確使用遊標十分重要：

   (1). 在資料幫浦的源表中使用時間戳，這樣每天的維表資料維護只針對更新日期為最新時間的資料來進行，大大減少需要維護的資料記錄數。

   (2). 在insert和update維表時都加上一個條件來過濾維表中已經存在的記錄，例如：

insert into dim_customer select * from ods_customer where ods_customer.code not exists (dim_customer.code)

 ods_customer為資料來源表。dim_customer為維表。

   (3). 使用顯式的遊標，因為隱式的遊標將會執行兩次操作，第一次檢索記錄，第二次檢查too many rows這個exception,而顯式遊標不執行第二次操作。

3． 據抽取和上傳時的sql最佳化：

(1). Where 子句中的串連順序：

oracle採用自下而上的順序解析where子句，根據這個原理，表之間的串連必須寫在其他where條件之前，那些可以過濾掉大量記錄的條件必須寫在where子句的末尾。如：

低效：select * from emp e where sal>5000 and job = ‘manager’ and 25<(select count (*) from emp where mgr=e.empno);

高效：select * from emp e where 25<(select count(*) from emp where mgr=e.empno) and sal>5000 and job=’manager’;

   (2). 刪除全表時，用truncate 替代 delete,同時注意truncate只能在刪除全表時適用，因為truncate是ddl而不是dml。

   (3). 盡量多使用commit

只要有可能就在程式中對每個delete,insert,update操作盡量多使用commit,這樣系統效能會因為commit所釋放的資源而大大提高。

   (4). 用exists替代in ，可以提高查詢的效率。

   (5). 用not exists 替代 not in

   (6). 最佳化group by

提高group by語句的效率，可以將不需要的記錄在group by之前過濾掉。如：

低效：select job, avg(sal) from emp group by job having job = ‘president’ or job=’manager’;

高效： select job, avg(sal) from emp having job=’president’ or job=’manager’ group by job;

   (7). 有條件的使用union-all 替代 union：這樣做排序就不必要了，效率會提高3到5倍。

   (8). 分離表和索引

       總是將你的表和索引建立在不同的資料表空間內，決不要將不屬於oracle內部系統的對象存放到system資料表空間內。同時確保資料資料表空間和索引資料表空間置於不同的硬碟控制卡控制的硬碟上。

Trackback: http://tb.blog.csdn.net/TrackBack.aspx?PostId=596347