[sql server] 化解字串不能超過8000的方法

/*--化解字串不能超過8000的方法

 經常有人提到,用動態產生SQL語句的方法處理資料時,處理語句超長,無法處理的問題
 下面就討論這個問題:
--鄒建 2003.9(引用請保留此資訊)--*/

/*-- 測試環境

--以系統資料表 syscolumns 為測試資料,要求按xtype為欄欄位,name為列欄位,統計colid的和
--要求結果

xtype    filedname_1    fieldname_2    .....    fieldname_n
-------- -------------- -------------- -------- --------------
34       0              0              .....    1
--*/

/*--常規處理方法(不加行數限制會因產生的字串益出而出錯)
set rowcount 10 --因為syscolumns的記錄較,會導致產生的字串溢出,所以限制一下行數

declare @s nvarchar(4000)
set @s=''
select @s=@s+N','+quotename([name])
 +N'=sum(case name when '+quotename([name],'''')
 +N' then [colid] else 0 end)'
from(select distinct [name] from [syscolumns]) a

set rowcount 0 --取消限制
exec(N'select [xtype]'+@s+N' from [syscolumns] group by [xtype]')

/*--問題
 不加行數限制時,會因產生的字串益出而出錯
--*/
--*/

/*--方法1. 多個變數處理

--根據查詢結果定義變數(實際處理中,應該是估計需要多少個變數,定義足夠多的變數個數,多定義變數並不影響處理,下面就多定義了一個)
--產生資料處理暫存資料表
SELECT id=IDENTITY(int,0,1),
 g=0,
 a=CAST(N',' +QUOTENAME([name])
  +N'=SUM(CASE [name] WHEN N' +QUOTENAME(name,N'''')
  +N' THEN [colid] ELSE 0 END)'
  as nvarchar(4000))
INTO # FROM syscolumns
WHERE name>N''
GROUP BY name

--分組暫存資料表
UPDATE a SET G=id/i
FROM # a,(SELECT i=3800/MAX(LEN(a)) FROM #)b
SELECT MAX(g)+1 as N'需要的變數個數' FROM #

DECLARE @0 nvarchar(4000),@1 nvarchar(4000),@2 nvarchar(4000),@3 nvarchar(4000),@4 nvarchar(4000)
SELECT @0=N'',@1=N'',@2=N'',@3=N'',@4=N''
SELECT
 @0=CASE g WHEN 0 THEN @0+a ELSE @0 END,
 @1=CASE g WHEN 1 THEN @1+a ELSE @1 END,
 @2=CASE g WHEN 2 THEN @2+a ELSE @2 END,
 @3=CASE g WHEN 3 THEN @3+a ELSE @3 END,
 @4=CASE g WHEN 4 THEN @4+a ELSE @4 END
FROM #
EXEC(N'SELECT xtype'+@0+@1+@2+@3+@4+N' FROM syscolumns GROUP BY xtype')
DROP TABLE #

/*--方法說明

優點:比較靈活,資料量大時只需要增加變數就行了.不用改動其他部分
缺點:要自行估計處理的資料,估計不足就會出錯
--*/
--*/

/*--方法2. bcp+isql

--因為要用到bcp+isql,所以需要這些資訊
declare @servername sysname,@username sysname,@pwd sysname
select @servername=@@servername  --伺服器名
 ,@username=N''           --使用者名稱
 ,@pwd=N''                --密碼

declare @tbname sysname,@s nvarchar(4000)

--建立資料處理暫存資料表
set @tbname=quotename(N'##temp_'+cast(newid() as varchar(36)))
set @s=N'create table '+@tbname+'(a nvarchar(4000))
insert into '+@tbname+N'
select N''create view '
 +stuff(@tbname,2,2,N'')
 +N' as
select [xtype]''
union all
select N'',''+quotename([name])+''=sum(case [name] when N''
 +quotename([name],'''''''')
 +'' then [colid] else 0 end)''
 from(select distinct [name] from [syscolumns] where name<>N''xtype'')a
union all
select N''from [syscolumns] group by [xtype]'''
exec(@s)

--產生建立視圖的檔案,注意使用了檔案:c:/temp.txt
set @s=N'bcp "'+@tbname+N'" out "c:/'+@tbname+N'" /S"'
 +@servername+N'" /U"'+@username+N'" /P"'+@pwd+N'" /w'
exec master..xp_cmdshell @s,no_output

--調用isql產生資料處理視圖
set @s=N'osql /S"'+@servername
 +case
  when @username=N'' then N'" /E'
  else N'" /U"'+@username+N'" /P"'+@pwd+N'"'
 end
 +N' /d"'+db_name()+N'" /i"c:/'+@tbname+'"'
exec master..xp_cmdshell @s,no_output

--刪除臨時檔案
set @s=N'del "c:/'+@tbname+'"'
exec master..xp_cmdshell @s,no_output

--調用視圖,顯示處理結果
set @s=N'drop table '+@tbname+N'
select * from '+stuff(@tbname,2,2,N'')+N'
drop view '+stuff(@tbname,2,2,N'')
exec(@s)

/*--方法總結

 優點:程式自動處理,不存在判斷錯誤的問題
 缺點:複雜,經過的步驟多,容易出錯,而且需要一定的操作員許可權
--*/
--*/

--/*-- 方法3. 多個變數處理,綜合了方法1,2的優點,解決了方法1中需要人為判斷,增加變數的問題,排除了方法2,需要許可權和過程複雜的問題
DECLARE @sqlhead nvarchar(4000),@sqlend nvarchar(4000)
 ,@sql1 nvarchar(4000),@sql2 nvarchar(4000),@sql3 nvarchar(4000),@sql4 nvarchar(4000)
 ,@i int,@ic nvarchar(10)

--產生資料處理暫存資料表
SELECT id=IDENTITY(int,0,1),
 g=0,
 a=CAST(N','
  +QUOTENAME([name])
  +N'=SUM(CASE [name] WHEN N'
  +QUOTENAME(name,N'''')
  +N' THEN [colid] ELSE 0 END)'
  as nvarchar(4000))
INTO # FROM(
 SELECT DISTINCT name FROM [syscolumns] WHERE name>N'')a

--分組暫存資料表
UPDATE a SET @i=id/i,g=@i
FROM # a,(SELECT i=3800/MAX(LEN(a)) FROM #)b
SET @ic=@i

--產生資料處理語句
SELECT
 @sqlhead=N''''
  +REPLACE(N'SELECT [xtype]',N'''',N'''''')
  +'''',
 @sqlend=N''''
  +REPLACE(N' FROM [syscolumns] GROUP BY [xtype]',N'''',N'''''')
  +N'''',
 @sql1=N'',@sql2=N'',@sql3=N'',@sql4=N''
WHILE @ic>=0
 SELECT
  @sql1=N',@'+@ic+N' nvarchar(4000)'+@sql1,
  @sql2=N',@'+@ic+N'=N'''''+@sql2,
  @sql3=N',@'+@ic
   +N'=CASE g WHEN '+@ic
   +N' THEN @'+@ic+N'+a ELSE @'+@ic
   +N' END'+@sql3,
  @sql4=N'+@'+@ic+@sql4,
  @ic=@ic-1
SELECT
 @sql1=STUFF(@sql1,1,1,N''),
 @sql2=STUFF(@sql2,1,1,N''),
 @sql3=STUFF(@sql3,1,1,N''),
 @sql4=STUFF(@sql4,1,1,N'')

--執行
EXEC(N'DECLARE '+@sql1+N'
SELECT '+@sql2+N'
SELECT '+@sql3+N' FROM #
EXEC(N'+@sqlhead+N'+'+@sql4+N'+N'+@sqlend+N')')
--刪除暫存資料表
DROP TABLE #

/*--方法總結
 
 總結了前兩種方法的優點，自動判斷需要處理的變數數
--*/
--*/