MongoDB Hadoop Connector發布

10gen剛剛發布了MongoDB Hadoop Connector的1.0版本，它是一個中介軟體產品，用於將MongoDB和Hadoop串連起來，讓MongoDB可以方便的使用Hadoop的分散式運算能力。

MongoDB Hadoop Connector的主要流程是讓Hadoop從MongoDB中讀取未經處理資料，在通過Hadoop計算完成後，再將結果匯入到MongoDB中。原始數 據的讀取和結果寫入可以對同一個MongoDB，也可以是不同的。其主要目的是讓使用MongoDB的使用者能夠更方便地直接使用Hadoop功能。

目前MongoDB Hadoop Connector已經與Hadoop生態系統中的一些組件進行了整合，後續還會根據反饋進行更全方便的整合。具體如下：

• 可以通過 Pig 向 MongoDB 中寫入資料。
• 可以通過分布式日誌系統 Flume 往MongoDB中匯入日誌未經處理資料。
• 通過使用Hadoop Streaming，可以用 Python來寫 MapReduce函數。

MongoDB Hadoop Connector目前支援2.0以上的版本（1.8.x版本也基本上能夠支援）。

當然項目是開源的，項目地址：mongo-hadoop

訊息來源：blog.10gen.com