四項技術提高SQL Server的效能

　　本文講解如何使用LEFT JOIN、CROSS JOIN以及IDENTITY值的檢索，這些技術來提高基於SQL Server的應用程式的效能或改善其延展性。

　　有時，為了讓應用程式運行得更快，所做的全部工作就是在這裡或那裡做一些很小調整。但關鍵在於確定如何進行調整！遲早您會遇到這種情況：應用程式中的SQL 查詢不能按照您想要的方式進行響應。它要麼不返回資料，要麼耗費的時間長得出奇。如果它降低了公司專屬應用程式程式的速度，使用者必須等待很長時間。使用者希望應用程式響應迅速，他們的報告能夠在瞬間之內返回分析資料。就我自己而言，如果在Web上衝浪時某個頁面要耗費十多秒才能載入，我也會很不耐煩。

　　為瞭解決這些問題，重要的是找到問題的根源。那麼，從哪裡開始呢？根本原因通常在於資料庫設計和訪問它的查詢。我將講述四項技術，這些技術可用於提高基於SQL Server的應用程式的效能或改善其延展性。我將仔細說明 LEFT JOIN、CROSS JOIN 的使用以及IDENTITY 值的檢索。請記住，根本沒有神奇的解決方案。調整您的資料庫及其查詢需要佔用時間、進行分析，還需要大量的測試。這些技術都已被證明行之有效，但對您的應用程式而言，可能其中一些技術比另一些技術更適用。

　　從 INSERT 返回 IDENTITY

　　我決定從遇到許多問題的內容入手：如何在執行SQL INSERT後檢索IDENTITY值。通常，問題不在於如何編寫檢索值的查詢，而在於在哪裡以及何時進行檢索。在SQL Server中，下面的語句可用於檢索由最新在活動資料庫串連上啟動並執行 SQL 陳述式所建立的 IDENTITY 值：

SELECT @@IDENTITY

　　這個 SQL 陳述式並不複雜，但需要記住的一點是：如果這個最新的 SQL 陳述式不是 INSERT，或者您針對非 INSERT SQL 的其他串連運行了此 SQL，則不會獲得期望的值。您必須運行下列代碼才能檢索緊跟在 INSERT SQL 之後且位於同一串連上的 IDENTITY，如下所示：

INSERT INTO Products (ProductName) VALUES ('Chalk')
SELECT @@IDENTITY

　　在一個串連上針對 Northwind 資料庫運行這些查詢將返回一個名稱為 Chalk 的新產品的 IDENTITY 值。所以，在使用ADOVisual Basic應用程式中，可以運行以下語句：

Set oRs = oCn.Execute("SET NOCOUNT ON;INSERT INTO Products _
(ProductName) VALUES ('Chalk');SELECT @@IDENTITY")
lProductID = oRs(0)

　　此代碼告訴 SQL Server 不要返回查詢的行計數，然後執行 INSERT 語句，並返回剛剛為這個新行建立的 IDENTITY 值。SET NOCOUNT ON 語句表示返回的記錄集有一行和一列，其中包含了這個新的 IDENTITY 值。如果沒有此語句，則會首先返回一個空的記錄集（因為 INSERT 語句不返回任何資料），然後會返回第二個記錄集，第二個記錄集中包含 IDENTITY 值。這可能有些令人困惑，尤其是因為您從來就沒有希望過 INSERT 會返回記錄集。之所以會發生此情況，是因為 SQL Server 看到了這個行計數（即一行受到影響）並將其解釋為表示一個記錄集。因此，真正的資料被推回到了第二個記錄集。當然您可以使用 ADO 中的 NextRecordset 方法擷取此第二個記錄集，但如果總能夠首先返回該記錄集且只返回該記錄集，則會更方便，也更有效率。

　　此方法雖然有效，但需要在 SQL 陳述式中額外添加一些代碼。獲得相同結果的另一方法是在 INSERT 之前使用 SET NOCOUNT ON 語句，並將 SELECT @@IDENTITY 語句放在表中的 FOR INSERT 觸發器中，如下面的程式碼片段所示。這樣，任何進入該表的 INSERT 語句都將自動返回 IDENTITY 值。

CREATE TRIGGER trProducts_Insert ON Products FOR INSERT AS
SELECT @@IDENTITY
GO

　　觸發器只在 Products 表上發生 INSERT 時啟動，所以它總是會在成功 INSERT 之後返回一個 IDENTITY。使用此技術，您可以始終以相同的方式在應用程式中檢索 IDENTITY 值。

　　內嵌視圖與暫存資料表

　　某些時候，查詢需要將資料與其他一些可能只能通過執行 GROUP BY 然後執行標準查詢才能收集的資料進行聯結。例如，如果要查詢最新五個定單的有關資訊，您首先需要知道是哪些定單。這可以使用返回定單 ID 的 SQL 查詢來檢索。此資料就會儲存在暫存資料表（這是一個常用技術）中，然後與 Products 表進行聯結，以返回這些定單售出的產品數量：

CREATE TABLE #Temp1 (OrderID INT NOT NULL, _
OrderDate DATETIME NOT NULL)
INSERT INTO #Temp1 (OrderID, OrderDate)
SELECT TOP 5 o.OrderID, o.OrderDate
FROM Orders o ORDER BY o.OrderDate DESC
SELECT p.ProductName, SUM(od.Quantity) AS ProductQuantity
FROM #Temp1 t
INNER JOIN [Order Details] od ON t.OrderID = od.OrderID
INNER JOIN Products p ON od.ProductID = p.ProductID
GROUP BY p.ProductName
ORDER BY p.ProductName
DROP TABLE #Temp1

　　這些 SQL 陳述式會建立一個暫存資料表，將資料插入該表中，將其他資料與該表進行聯結，然後除去該暫存資料表。這會導致此查詢進行大量 I/O 操作，因此，可以重新編寫查詢，使用內嵌視圖取代暫存資料表。內嵌視圖只是一個可以聯結到 FROM 子句中的查詢。所以，您不用在 tempdb 中的暫存資料表上耗費大量 I/O 和磁碟訪問，而可以使用內嵌視圖得到同樣的結果：

SELECT p.ProductName,
SUM(od.Quantity) AS ProductQuantity
FROM (
SELECT TOP 5 o.OrderID, o.OrderDate
FROM Orders o
ORDER BY o.OrderDate DESC
) t
INNER JOIN [Order Details] od ON t.OrderID = od.OrderID
INNER JOIN Products p ON od.ProductID = p.ProductID
GROUP BY
p.ProductName
ORDER BY
p.ProductName

　　此查詢不僅比前面的查詢效率更高，而且長度更短。暫存資料表會消耗大量資源。如果只需要將資料聯結到其他查詢，則可以試試使用內嵌視圖，以節省資源。

　　避免 LEFT JOIN 和 NULL

　　當然，有很多時候您需要執行 LEFT JOIN 和使用 NULL 值。但是，它們並不適用於所有情況。改變 SQL 查詢的構建方式可能會產生將一個花幾分鐘啟動並執行報告縮短到只花幾秒鐘這樣的天壤之別的效果。有時，必須在查詢中調整資料的形態，使之適應應用程式所要求的顯示方式。雖然 TABLE 資料類型會減少大量佔用資源的情況，但在查詢中還有許多地區可以進行最佳化。SQL 的一個有價值的常用功能是 LEFT JOIN。它可以用於檢索第一個表中的所有行、第二個表中所有匹配的行、以及第二個表中與第一個表不匹配的所有行。例如，如果希望返回每個客戶及其定單，使用 LEFT JOIN 則可以顯示有定單和沒有定單的客戶。

　　此工具可能會被過度使用。LEFT JOIN 消耗的資源非常之多，因為它們包含與 NULL（不存在）資料匹配的資料。在某些情況下，這是不可避免的，但是代價可能非常高。LEFT JOIN 比 INNER JOIN 消耗資源更多，所以如果您可以重新編寫查詢以使得該查詢不使用任何 LEFT JOIN，則會得到非常可觀的回報。

　　加快使用 LEFT JOIN 的查詢速度的一項技術涉及建立一個 TABLE 資料類型，插入第一個表（LEFT JOIN 左側的表）中的所有行，然後使用第二個表中的值更新 TABLE 資料類型。此技術是一個兩步的過程，但與標準的 LEFT JOIN 相比，可以節省大量時間。一個很好的規則是嘗試各種不同的技術並記錄每種技術所需的時間，直到獲得用於您的應用程式的執行效能最佳的查詢。

　　測試查詢的速度時，有必要多次運行此查詢，然後取一個平均值。因為查詢（或預存程序）可能會儲存在 SQL Server 記憶體中的過程緩衝中，因此第一次嘗試耗費的時間好像稍長一些，而所有後續嘗試耗費的時間都較短。另外，運行您的查詢時，可能正在針對相同的表運行其他查詢。當其他查詢鎖定和解鎖這些表時，可能會導致您的查詢要排隊等待。例如，如果您進行查詢時某人正在更新 此表中的資料，則在更新提交時您的查詢可能需要耗費更長時間來執行。

　　避免使用 LEFT JOIN 時速度降低的最簡單方法是儘可能多地圍繞它們設計資料庫。例如，假設某一產品可能具有類別也可能沒有類別。如果 Products 表格儲存體了其類別的 ID，而沒有用於某個特定產品的類別，則您可以在欄位中儲存 NULL 值。然後您必須執行 LEFT JOIN 來擷取所有產品及其類別。您可以建立一個值為“No Category”的類別，從而指定外鍵關係不允許 NULL 值。通過執行上述操作，現在您就可以使用 INNER JOIN 檢索所有產品及其類別了。雖然這看起來好像是一個帶有多餘資料的變通方法，但可能是一個很有價值的技術，因為它可以消除 SQL 批處理語句中消耗資源較多的 LEFT JOIN。在資料庫中全部使用此概念可以為您節省大量的處理時間。請記住，對於您的使用者而言，即使幾秒鐘的時間也非常重要，因為當您有許多使用者正在訪問同一個線上資料庫應用程式時，這幾秒鐘實際上的意義會非常重大。

　　靈活使用笛卡爾乘積

　　對於此技巧，我將進行非常詳細的介紹，並提倡在某些情況下使用笛卡爾乘積。出於某些原因，笛卡爾乘積 (CROSS JOIN) 遭到了很多譴責，開發人員通常會被警告根本就不要使用它們。在許多情況下，它們消耗的資源太多，從而無法高效使用。但是像 SQL 中的任何工具一樣，如果正確使用，它們也會很有價值。例如，如果您想運行一個返回每月資料（即使某一特定月份客戶沒有定單也要返回）的查詢，您就可以很方便地使用笛卡爾乘積。

　　雖然這看起來好像沒什麼神奇的，但是請考慮一下，如果您從客戶到定單（這些定單按月份進行分組並對銷售額進行小計）進行了標準的 INNER JOIN，則只會獲得客戶有定單的月份。因此，對於客戶未訂購任何產品的月份，您不會獲得 0 值。如果您想為每個客戶都繪製一個圖，以顯示每個月和該月銷售額，則可能希望此圖包括月銷售額為 0 的月份，以便直觀標識出這些月份。如果使用 Figure 2（最後一頁） 中的 SQL，資料則會跳過銷售額為 0 美元的月份，因為在定單表中對於零銷售額不會包含任何行（假設您只儲存發生的事件）。

　　Figure 3（最後一頁）中的代碼雖然較長，但是可以達到擷取所有銷售資料（甚至包括沒有銷售額的月份）的目標。首先，它會提取去年所有月份的列表，然後將它們放入第一個 TABLE 資料類型表 (@tblMonths) 中。下一步，此代碼會擷取在該時間段內有銷售額的所有客戶公司的名稱列表，然後將它們放入另一個 TABLE 資料類型表 (@tblCus-tomers) 中。這兩個表格儲存體了建立結果集所必需的所有基本資料，但實際銷售數量除外。 第一個表中列出了所有月份（12 行），第二個表中列出了這個時間段內有銷售額的所有客戶（對於我是 81 個）。並非每個客戶在過去 12 個月中的每個月都購買了產品，所以，執行 INNER JOIN 或 LEFT JOIN 不會返回每個月的每個客戶。這些操作只會返回購買產品的客戶和月份。

　　笛卡爾乘積則可以返回所有月份的所有客戶。笛卡爾乘積基本上是將第一個表與第二個表相乘，產生一個行集合，其中包含第一個表中的行數與第二個表中的行數相乘的結果。因此，笛卡爾乘積會向表@tblFinal 返回 972 行。最後的步驟是使用此日期範圍內每個客戶的月銷售額總計更新 @tblFinal 表，以及選擇最終的行集。

　　如果由於笛卡爾乘積佔用的資源可能會很多，而不需要真正的笛卡爾乘積，則可以謹慎地使用 CROSS JOIN。例如，如果對產品和類別執行了 CROSS JOIN，然後使用 WHERE 子句、DISTINCT 或 GROUP BY 來篩選出大多數行，那麼使用 INNER JOIN 會獲得同樣的結果，而且效率高得多。如果需要為所有的可能性都返回資料（例如在您希望使用每月銷售日期填充一個圖表時），則笛卡爾乘積可能會非常有協助。但是，您不應該將它們用於其他用途，因為在大多數方案中 INNER JOIN 的效率要高得多。

　　拾遺補零

　　這裡介紹其他一些可協助提高 SQL 查詢效率的常用技術。假設您將按地區對所有銷售人員進行分組並將他們的銷售額進行小計，但是您只想要那些資料庫中標記為處於活動狀態的銷售人員。您可以按地區對銷售人員分組，並使用 HAVING 子句消除那些未處於活動狀態的銷售人員，也可以在 WHERE 子句中執行此操作。在 WHERE 子句中執行此操作會減少需要分組的行數，所以比在 HAVING 子句中執行此操作效率更高。HAVING 子句中基於行的條件的篩選會強制查詢對那些在 WHERE 子句中會被去除的資料進行分組。

　　另一個提高效率的技巧是使用 DISTINCT 關鍵字尋找資料行的單獨報表，來代替使用 GROUP BY 子句。在這種情況下，使用 DISTINCT 關鍵字的 SQL 效率更高。請在需要計算彙總函式（SUM、COUNT、MAX 等）的情況下再使用 GROUP BY。另外，如果您的查詢總是自己返回一個唯一的行，則不要使用 DISTINCT 關鍵字。在這種情況下，DISTINCT 關鍵字只會增加系統開銷。

　　您已經看到了，有大量技術都可用於最佳化查詢和實現特定的商務規則，技巧就是進行一些嘗試，然後比較它們的效能。最重要的是要測試、測試、再測試。

Figure 2 Returning All Customers and Their Sales
set nocount on
DECLARE @dtStartDate DATETIME,
@dtEndDate DATETIME,
@dtDate DATETIME
SET @dtEndDate = '5/5/1997'

SET @dtEndDate = DATEADD(DD, -1, CAST(CAST((MONTH(@dtEndDate) + 1) AS VARCHAR(2)) + '/01/' + CAST(YEAR(@dtEndDate) AS VARCHAR(4)) + '

23:59:59' AS DATETIME))
SET @dtStartDate = DATEADD(MM, -1 * 12, @dtEndDate)
SELECT CAST(YEAR(o.OrderDate) AS VARCHAR(4)) + '-' +
CASE
WHEN MONTH(o.OrderDate) < 10
THEN '0' + CAST(MONTH(o.OrderDate) AS VARCHAR(2))
ELSE CAST(MONTH(o.OrderDate) AS VARCHAR(2))
END AS sMonth,
c.CustomerID,
c.CompanyName,
c.ContactName,
SUM(od.Quantity * od.UnitPrice) AS mSales
FROM Customers c
INNER JOIN Orders o ON c.CustomerID = o.CustomerID
INNER JOIN [Order Details] od ON o.OrderID = od.OrderID
WHERE o.OrderDate BETWEEN @dtStartDate AND @dtEndDate
GROUP BY
CAST(YEAR(o.OrderDate) AS VARCHAR(4)) + '-' +
CASE
WHEN MONTH(o.OrderDate) < 10
THEN '0' + CAST(MONTH(o.OrderDate) AS VARCHAR(2))
ELSE CAST(MONTH(o.OrderDate) AS VARCHAR(2))
END,
c.CustomerID,
c.CompanyName,
c.ContactName
ORDER BY
c.CompanyName,
sMonth
Figure 3 Cartesian Product at Work
DECLARE @tblMonths TABLE (sMonth VARCHAR(7))
DECLARE @tblCustomers TABLE ( CustomerID CHAR(10),
CompanyName VARCHAR(50),
ContactName VARCHAR(50))
DECLARE @tblFinal TABLE ( sMonth VARCHAR(7),
CustomerID CHAR(10),
CompanyName VARCHAR(50),
ContactName VARCHAR(50),
mSales MONEY)
DECLARE @dtStartDate DATETIME,
@dtEndDate DATETIME,
@dtDate DATETIME,
@i INTEGER
SET @dtEndDate = '5/5/1997'
SET @dtEndDate = DATEADD(DD, -1, CAST(CAST((MONTH(@dtEndDate) + 1) AS
VARCHAR(2)) + '/01/' + CAST(YEAR(@dtEndDate) AS VARCHAR(4)) + '
23:59:59' AS DATETIME))
SET @dtStartDate = DATEADD(MM, -1 * 12, @dtEndDate)
— Get all months into the first table
SET @i = 0
WHILE (@i < 12)
BEGIN

SET @dtDate = DATEADD(mm, -1 * @i, @dtEndDate)
INSERT INTO @tblMonths SELECT CAST(YEAR(@dtDate) AS VARCHAR(4)) + '-' +
CASE
WHEN MONTH(@dtDate) < 10
THEN '0' + CAST(MONTH(@dtDate) AS VARCHAR(2))
ELSE CAST(MONTH(@dtDate) AS VARCHAR(2))
END AS sMonth
SET @i = @i + 1
END
— Get all clients who had sales during that period into the "y" table
INSERT INTO @tblCustomers
SELECT DISTINCT
c.CustomerID,
c.CompanyName,
c.ContactName
FROM Customers c
INNER JOIN Orders o ON c.CustomerID = o.CustomerID
WHERE o.OrderDate BETWEEN @dtStartDate AND @dtEndDate
INSERT INTO @tblFinal
SELECT m.sMonth,
c.CustomerID,
c.CompanyName,
c.ContactName,
0
FROM @tblMonths m CROSS JOIN @tblCustomers c
UPDATE @tblFinal SET
mSales = mydata.mSales
FROM @tblFinal f INNER JOIN
(
SELECT c.CustomerID,
CAST(YEAR(o.OrderDate) AS VARCHAR(4)) + '-' +
CASE WHEN MONTH(o.OrderDate) < 10
THEN '0' + CAST(MONTH(o.OrderDate) AS VARCHAR(2))
ELSE CAST(MONTH(o.OrderDate) AS VARCHAR(2))
END AS sMonth,
SUM(od.Quantity * od.UnitPrice) AS mSales
FROM Customers c
INNER JOIN Orders o ON c.CustomerID = o.CustomerID
INNER JOIN [Order Details] od ON o.OrderID = od.OrderID
WHERE o.OrderDate BETWEEN @dtStartDate AND @dtEndDate
GROUP BY
c.CustomerID,
CAST(YEAR(o.OrderDate) AS VARCHAR(4)) + '-' +
CASE WHEN MONTH(o.OrderDate) < 10
THEN '0' + CAST(MONTH(o.OrderDate) AS VARCHAR(2))
ELSE CAST(MONTH(o.OrderDate) AS VARCHAR(2))
END
) mydata on f.CustomerID = mydata.CustomerID AND f.sMonth =
mydata.sMonth
SELECT f.sMonth,
f.CustomerID,
f.CompanyName,
f.ContactName,
f.mSales
FROM @tblFinal f
ORDER BY
f.CompanyName,
f.sMonth