集算器協助MongoDB計算之交叉匯總

標籤：mongodb   集算器   交叉匯總報表   代碼   

MongoDB實現交叉匯總比較困難，如果將資料取出，用Java等進階語言來匯總的話，也相當複雜。因此，可以考慮用集算器esProc輔助MongoDB完成交叉匯總。下面我們通過一個例子來看一下具體做法。

  Student集合如下：

db.student.insert  ( {school:‘school1‘, sname : ‘Sean‘ , sub1:4, sub2 :5 })

db.student.insert  ( {school:‘school1‘, sname : ‘chris‘ , sub1:4, sub2 :3 })

db.student.insert  ( {school:‘school1‘, sname : ‘becky‘ , sub1:5, sub2 :4 })

db.student.insert  ( {school:‘school1‘, sname : ‘sam‘ , sub1: 5,sub2 :4 })

db.student.insert  ( {school:‘school2‘, sname : ‘dustin‘ , sub1:2, sub2 :2 })

db.student.insert  ( {school:‘school2‘, sname : ‘greg‘ , sub1:3, sub2 :4 })

db.student.insert  ( {school:‘school2‘, sname : ‘peter‘ , sub1:5, sub2 :1 })

db.student.insert  ( {school:‘school2‘, sname : ‘brad‘ , sub1:2, sub2 :2 })

db.student.insert  ( {school:‘school2‘, sname : ‘liz‘ , sub1: 3,sub2 :null })

  希望能夠統計出如下的交叉表：每行一個學校，第一列是sub1成績為5的人數，第二例是sub1成績為4的人數，以此類推。

650) this.width=650;" src="http://s3.51cto.com/wyfs02/M02/5C/23/wKiom1UbVCiBwDJgAAB-3xljjrM561.jpg" style="float:none;" title="esProc_mongodb_cross_1.jpg" alt="wKiom1UbVCiBwDJgAAB-3xljjrM561.jpg" />

集算器的指令碼如下：

650) this.width=650;" src="http://s3.51cto.com/wyfs02/M02/5C/23/wKiom1UbVCnDN0akAAFJfaEK7Ds508.jpg" style="float:none;" title="esProc_mongodb_cross_2.jpg" alt="wKiom1UbVCnDN0akAAFJfaEK7Ds508.jpg" />

  A1: 串連MongoDB資料庫，ip和連接埠號碼是localhost:27017，資料庫是test，使用者名稱和密碼都是test。

  A2: 使用find函數從MongoDB中取出集合student，形成遊標。esProc在find函數中採用了和mongdb的find語句一樣的參數格式。esProc的遊標是分批讀取和處理資料，可以避免資料量過大，記憶體出現溢出的情況。這裡資料量不大，所以用fetch函數一次取出。

  A3：首先按照學校分組。

  A4：學校分組之後，每組內部按照[1,2,3,4,5]的序列對齊分組，再求每一個對齊分組的長度。

  A5：對A4的長度數按照需求放入相應的位置，產生結果排列。

  結果如下：

650) this.width=650;" src="http://s3.51cto.com/wyfs02/M00/5C/1E/wKioL1UbVWfBQeOjAAB4qBQpwU0640.jpg" style="float:none;" title="esProc_mongodb_cross_3.jpg" alt="wKioL1UbVWfBQeOjAAB4qBQpwU0640.jpg" />

需要說明的是：集算器esProc並不包含MongoDB的java驅動包。用esProc來訪問MongoDB，必須提前將MongoDB的java驅動包（要求2.12.2或以上版，如mongo-java-driver-2.12.2.jar）放到[esProc安裝目錄]\common\jdbc中。

集算器esProc協助MongoDB計算的指令碼很容易整合到java中，只要增加一行，寫成resultA5即可向java輸出resultset形式的結果，具體的代碼參考esProc教程。同樣，用java調用esProc訪問MongoDB也必須將mongdb的java驅動包放到java程式的classpath中。

本文出自 “高效能報表資料計算” 部落格，請務必保留此出處http://report5.blog.51cto.com/8028595/1630044

集算器協助MongoDB計算之交叉匯總