用好資料庫索引提升嵌入式軟體效能和效率

來源:互聯網
上載者:User

BKJIA資料庫頻道也向您推薦《資料庫之索引與查詢專題》專題,相信這個專題能協助您更好的理解本文。為了從一本書中擷取資訊,怎樣做更有效?仔細閱讀每一頁內容,還是根據索引來精確確定要擷取資訊的位置?

顯然後者更有效,嵌入式系統也應該能如此智能。如今,嵌入式應用程式管理著數量高速增長的複雜資料。找到正確的資料無論是尋找網路包的路由目標節點、計算地圖上點與點之間的距離、以及其他計算目標)通常必須在即時效能要求下被實現。

幸運的是,編程人員可以使用資料索引將尋找速度從線性層級提升到對數層級。隨著成品資料庫管理系統DBMS)在嵌入式系統開發中的日趨重要,索引也得到了更多的使用,多數嵌入式資料庫都支援至少一種索引類型。

然而,在許多項目中,首先考慮通常也是唯一的)索引是B樹。這是因為在現有的大量索引類型中,只有B樹索引最為通用。毫無疑問,B樹能夠高效完成基本的搜尋操作,諸如:精確匹配、首碼、範圍搜尋等。然而,對於IP路由、映射、模式查詢演算法開發等目標來說,非通用的索引類型更加合適,並且能夠帶來更快的速度和對CPU刻度等資源更有效地利用見圖1)。

圖 1: B樹並不是嵌入式應用程式唯一的索引選擇

下面章節展示了如何使用兩種非通用索引類型:R樹和Patricia trie

空間索引和R樹

映射(地圖)以及其他基於位置的功能在移動嵌入式應用中十分常見,這些應用從戰鬥車輛中的戰場支援系統到用來尋找最近的比薩餅店的行動電話應用程式。這些應用程式基底於空間查詢的演算法,例如:找到離當前位置最近的對象,找到使用者附近的全部對象,等等。

B樹索引是一維的:它無法處理用於空間搜尋的二維和三維座標。R樹又叫做Guttman R樹,根據發明者命名)是一個不錯的替代品。它使 用邊界盒bounding box)來映射空間中的對象。如果一個對象由座標點X, Y)表示,那麼他的邊界盒是一個邊長為1的正方形。

對所有的幾何對象線、多邊形以及其他形狀),邊界盒是這樣一個長方形:其左上方座標小於等於該對象中的任何點,其右下角座標大於等於該對象中的任何點。換句話說,邊界長方形是能夠完全包含給定對象的最小長方形。

R樹索引通常被用來加速空間搜尋發現包含某個點的長方形、找出全部與給定長方形重合的長方形,諸如此類)。在邊界盒的協助下,應用程式能夠管理各種形狀。

使用eXtremeDB的資料庫定義語言,空間對象可以被描述如下:

 
  1. /* 表示地圖上點的結構 */  
  2. struct Point  
  3. {  
  4. double latitude;  
  5. double longitude;  
  6. };  
  7. class Street {  
  8. /* 表示街道的點向量 */  
  9. vector<Point> points;  
  10. /* 街道封裝長方形 */  
  11. rect<double> wrap_rect;  
  12. rtree<wrap_rect> streets_idx;  
  13. }; 

如果我們希望加入一條新的街道,應用程式必須儲存街道的座標並計算其邊界盒。

 
  1. Street street;  
  2. mco_rect_t wr;  
  3. wr.l.x = DOUBLE_MAX;  
  4. wr.l.y = DOUBLE_MAX;  
  5. wr.r.x = DOUBLE_MIN;  
  6. wr.r.y = DOUBLE_MIN;  
  7. Street_new(trans, &street);  
  8. Street_points_alloc(&street, n_points);  
  9. for (i = 0; i < n_points; i++)   
  10. {  
  11. if (points[i].latitude < wr.l.latitude) {  
  12. wr.l.latitude = points[i].latitude;  
  13. }  
  14. if (points[i].longitude < wr.l.longitude) {  
  15. wr.l.longitude = points[i].longitude;  
  16. }  
  17. if (points[i].latitude > wr.r.latitude) {  
  18. wr.r.latitude = points[i].latitude;  
  19. }  
  20. if (points[i].longitude > wr.r.longitude) {  
  21. wr.r.longitude = points[i].longitude;  
  22. }  
  23. Street_points_put(&street, i, &points[i]);  
  24. }  
  25. Street_wrap_rect_put(&street, &wr); 

如果使用者搜尋一個位置,地圖應用程式將結果街道)在視窗中表示為一個座標為||的地圖長方形。

 
  1. mco_rect_t r;  
  2. mco_cursor_t c;  
  3. MCO_RET rc;  
  4. r.l.x = min_longitude;  
  5. r.l.y = min_latitude;  
  6. r.r.x = max_longitude;  
  7. r.r.y = max_latitude;  
  8. if (Street_streets_idx_search(trans, MCO_EQ, &c, (double*)&r) == MCO_S_OK)  
  9. {  
  10. for (; rc == MCO_S_OK; rc = mco_cursor_next(trans, &c))  
  11. {  
  12. Street street;  
  13. Street_from_cursor(trans, &c, &street);  
  14. // display it  
  15. }  

Patricia trie

B樹可以利用指定的首碼來定位關鍵字,例如,尋找以名字以“AAA”開頭的公司。然而,一些應用程式必須搜尋代表著一個特定值最長首碼的關鍵字。B樹可以實現這種需求,但必須從最長的首碼開始進行多次迭代並且查詢不同的給定值首碼。

一種更加有效首碼尋找索引是用於查詢字母-數字編碼的實踐演算法,即通常所說的Patricia trie。Patricia trie是二叉樹的一種變形,通常用於電話路由以及IP過濾。在第一種情況中,給定接入電話以及一張帶有已知首碼的接線員表,應用程式必須選擇正確的接線員接到該電話。在第二種情況下,給定了有效/拒絕域的IP掩碼,收到的(一個)HTTP請求應被分類為接受、拒絕、轉寄,等等。下面的資料庫模式定義了一張路由表,帶有一個由位向量表示的掩碼。

 
  1. class Route  
  2. {  
  3. Vector<bool> dest;  
  4. uint4 gateway;  
  5. uint4 interf;  
  6. uint2 metric;  
  7. unique patricia by_dest;  
  8. }; 

為了給接受到的IP地址找到合適的轉寄目標,應用程式使用Patricia trie對eXtremeDB做出如下查詢:

 
  1. mco_cursor_t csr;  
  2. if (MCO_S_OK == Route_by_dest_index_cursor(trans, &csr)) {  
  3. uint1 mask[4];  
  4. make_mask(mask, ip, 32);  
  5. /* find routes which mask match this IP address */  
  6. /*尋找掩碼與IP地址匹配的轉寄節點*/  
  7. if (MCO_S_OK == Route_by_dest_prefix_match(trans, &csr, mask, 32);  
  8. Route route;  
  9. Route_from_cursor(trans, &csr, &route);  
  10. ...  
  11. }  

下面的代碼將表示IP地址的整數轉換為位向量:

 
  1. void make_mask(uint1* mask, uint4 val, int bitnum)  
  2. {  
  3. int i;  
  4. val = val >> (32-bitnum);  
  5. memset(mask, 0, 4);  
  6. for (i = 0; i < bitnum; i++, val = val >> 1)  
  7. {  
  8. mask[i >> 3] |= (val&1) << (i&7);  
  9. }  

可選索引越多,結果越好

使用諸如R樹和Patricia trie的專用索引加快了代碼開發速度,提升了代碼效率,並使應用程式能夠處理更加複雜的資料結構。儘管著名的B樹足以處理大量的普通查詢任務,不怎麼出名的索引類型能夠在專用應用程式和資料類型中做得更好。R樹能夠高效處理映射和地理空間資料,而Patricia trie是電話路由、IP過濾以及其他必須通過匹配特定數值最長首碼的關鍵字來完成的任務的理想方案。

Steve Graves是McObject公司的CEO和創始人之一。McObject公司專註於嵌入式資料庫系統軟體。在創立McObject之前,Steve曾擔任Centura Solutions公司總裁以及Centura Software公司納斯達克股票代號:CNTR)負責全球諮詢方面的副總裁。他還擔任Raima公司的總裁兼首席運營官。可以通過steve.graves@mcobject.com與Steve聯絡。

Konstantin Knizhnik是McObject公司的軟體工程師,參與了嵌入式資料庫系統eXtremeDB的開發。他同樣還是多個優秀開源項目的作者,其中包括基於Java的資料庫管理系統Perst和Perst Lite,以及包括Java、C++和C#在內的多種程式設計語言的擴充工具。可以通過knizhnik@mcobject.com與Konstantin聯絡。如果您有任何問題可以和McObject中國區聯絡。

相關文章

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.