結合SQL Server全文檢索索引對Word內容進行檢索的三個方案

來源:互聯網
上載者:User

導讀:除了利用office提供的API對word文檔內容進行檢索外,本文簡要總結如何結合SQL Server的全文檢索索引技術對Word檔案的內容進行檢索的三個方案。

一、結合Windows索引服務進行全文檢索索引

方案摘要:

一個詳細的執行個體,參考這裡:http://database.ctocio.com.cn/51/11440551.shtml

優點:可以獨立對檔案以目錄方式物理存放,並且這些檔案繼續以doc格式存放。

缺點:只能讀取,不能寫入。

二、結合BLOB資料進行全文檢索索引

方案摘要:將doc檔案以BLOB資料格式varbinary(max)存放於資料庫的表中,再對錶進行全文檢索索引。這是最為常見的一種方案了。

一個簡單插入表的樣本:

 
  1. -------二進位檔案查詢樣本  
  2. /*************************************/  
  3. Use Master  
  4. Go  
  5. IF EXISTS (SELECT name FROM sys.databases WHERE name = N'BlobDataDemoDB')  
  6. DROP DATABASE BlobDataDemoDB  
  7. GO  
  8. USE Master  
  9. GO  
  10. CREATE DATABASE BlobDataDemoDB  
  11. GO  
  12. --------啟用全文檢索索引  
  13. /*************************************/  
  14. execute sp_fulltext_database 'enable' 
  15. go  
  16. use blobDataDemoDB  
  17. GO  
  18. --建立一個包含BlOB列的表  
  19. /*************************************/  
  20. if OBJECT_ID('SampleBlobTable') is not null 
  21. drop table SampleBlobTable  
  22. go  
  23. CREATE TABLE SampleBlobTable  
  24. (  
  25.    [PKID] int identity(1,1) primary key,  
  26.    [FileType] Nvarchar(32) null,  
  27.    [FileName] Nvarchar(255) null,  
  28.    [FileContent] VARBINARY(MAX) NULL,  
  29.    [AddTime] datetime default(getdate())  
  30. )  
  31. GO  
  32. IF EXISTS (SELECT * FROM sys.objects WHERE   
  33.    object_id = OBJECT_ID(N'[dbo].[CPP_InsertOneBlobDataToTable]')   
  34. AND type in (N'P', N'PC'))  
  35. DROP PROCEDURE [dbo].[CPP_InsertOneBlobDataToTable]  
  36. GO  
  37. --建立一個插入資料到SQL server的預存程序  
  38. /*************************************/  
  39. CREATE PROCEDURE CPP_InsertOneBlobDataToTable  
  40. (  
  41.    @FileType nvarchar(32),  
  42.    @FileName nvarchar(255),  
  43.    @FileContent VARBINARY(MAX)  
  44. )  
  45. AS 
  46. INSERT SampleBlobTable([FileType],[FileName],[FileContent],[AddTime])  
  47. VALUES (@FileType,@Filename,@FileContent,getdate())  
  48. GO  
 
  1. ///////////////////////////////////////////////  
  2. using System;   
  3. using System.Collections.Generic;   
  4. using System.Linq;   
  5. using System.Text;   
  6. using System.IO;   
  7. using System.Data.SqlClient;   
  8. using System.Data;   
  9. namespace BlobDataSearchDemo   
  10. {  
  11.      class Program  
  12.      {  
  13.          const string conn = @"Server=ap4\Agronet09;DataBase=BlobDataDemoDB;uid=sa;pwd=as;";  
  14.          static void Main(string[] args)  
  15.          {  
  16.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\輕舞飛揚.doc", conn);  
  17.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\天龍八部.doc", conn);  
  18.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\English.doc", conn);  
  19.              Console.ReadKey();  
  20.          }  
  21.          private static void SaveDoc2SQLServer(string filepath, string conn)  
  22.          {  
  23.              FileInfo fi = new FileInfo(filepath);  
  24.              if (fi.Exists)  
  25.              {  
  26.                  //Open the stream and read it back.  
  27.                  using (FileStream fs = File.OpenRead(filepath))  
  28.                  {  
  29.                      byte[] b = new byte[fi.Length];  
  30.                      SqlConnection Conn;  
  31.                      SqlCommand cmdUploadDoc;  
  32.                      UTF8Encoding temp = new UTF8Encoding(true);  
  33.                      while (fs.Read(b, 0, b.Length) > 0)  
  34.                      {  
  35.                          Conn = new SqlConnection(conn);  
  36.                          //Setting the SqlCommand  
  37.                cmdUploadDoc = new SqlCommand("CPP_InsertOneBlobDataToTable", Conn);  
  38.                cmdUploadDoc.CommandType = CommandType.StoredProcedure;  
  39.                cmdUploadDoc.Parameters.Add("@FileName", SqlDbType.NVarChar, 200).Value = fi.Name;  
  40.                cmdUploadDoc.Parameters.Add("@FileContent", SqlDbType.VarBinary, 0).Value =b;  
  41.                cmdUploadDoc.Parameters.Add("@FileType", SqlDbType.NVarChar, 32).Value =  
  42.  fi.Extension.Replace(".","");  
  43.                          Conn.Open();  
  44.                          cmdUploadDoc.ExecuteNonQuery();  
  45.                          Conn.Close();  
  46.                      }  
  47.                  }  
  48.              }  
  49.          }  
  50.       }  
  51. }  

查詢結果: 

 

注意:

優點:將doc檔案匯入SQL Server資料庫中,可以方便地進行讀取和全文檢索索引,必要時也可以寫入。

缺點:varbinary(Max)受2G大小限制,而且資料庫存入大量的BLOB資料,將變得異常臃腫,檢索速度將大大降低。

三、結合FileStream進行全文檢索索引

方案摘要:與方案二類似,只不過利用FileStream技術將doc檔案以資料格式varbinary(max)存放於資料庫外的物理檔案中,再對錶進行全文檢索索引。

前提:必須安裝全文檢索索引並啟用FileStream

 

參考:

http://msdn.microsoft.com/zh-cn/library/bb933993.aspx

http://www.cnblogs.com/downmoon/archive/2010/05/06/1727546.html

http://www.cnblogs.com/downmoon/archive/2010/05/08/1730044.html

優點:將doc檔案匯入SQL Server資料庫中,可以方便地進行讀取和全文檢索索引,必要時也可以寫入,並且克服了方案二的缺點。varbinary(Max)欄位只存放索引,而實際的內容存放於資料庫外,大小隻受NTFS檔案夾物理大小的限制。

小結:本文簡要總結如何結合SQL Server的全文檢索索引技術對Word檔案的內容進行檢索的三個方案。本人認為方案一和方案三均可行。歡迎交流。

相關文章

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.