知意圖大資料一體機詮釋Hadoop簡單之美

【IT168 資訊】2012 年12月3日消息，在北京開幕的HBTC 2012 (Hadoop 與大資料技術大會 2012，原 Hadoop in China) 技術盛會上，雲集眾多學者、企業使用者以及技術領袖。 大會發揚開源精神的角度，聯合國際和國內 Hadoop 及大資料應用的產學界人士和成功企業，通過技術應用審視大資料技術生態系統的現狀和發展趨勢，圍繞大資料處理、資訊檢索、內容挖掘、自然語言理解、資料視覺化、計算廣告學、 地理資訊系統等相關技術主題進行探討，充分促進 Hadoop 與大資料技術在國內的應用實踐。

Etu 知意圖首席顧問陳昭宇先生，在本屆大會上進行了題為」企業應用 Hadoop 的最佳模式」的主題演講。 在演講中，陳昭宇先生不僅介紹了知意圖大資料一體機 Etu Appliance 2.0 版本的最新功能，同時也向與會嘉賓分享知意圖的使用者和夥伴基於 Etu Appliance 2.0 上開發的行業解決方案與應用案例， 讓更多對大資料感興趣但充滿疑慮的人，充分瞭解大資料如何真正的落地。

Etu 知意圖是亞洲大資料解決方案的領導品牌，專注于電信、金融、與電商行業的大資料解決方案研發，于 2012 年 3 月 28 日正式發佈了亞洲第一個基於 Hadoop 的大資料一體機產品 —— Etu Appliance。 在此次 HBTC 2012 年度盛會中，Etu 知意圖再次與現場的嘉賓分享了技術卓越的 Hadoop 大資料一體機產品 Etu Appliance 的最新版本。 這一版本在 Hadoop 生態系統的開源基礎上，除了計算效能是使用者自行搭建系統的 3~12 倍外，還實現了一鍵式的大規模集群自動部署、非僅是 Name Node 的系統全面性 HA、Kerberos/LDAP 集成的多租戶安全性、 高效資料獲取、集群集中管理等特色功能，是一個真正企業級隨插即用的 Hadoop 一體機產品。

「因為Etu 知意圖深刻理解 Hadoop 應用開發者與系統管理員的痛，我們獨到的設計讓 Etu Appliance 2.0 確實做到了 Hadoop 集群部署、管理、HA、安全性都簡單難以超越，計算與網路傳輸效能高性價。 這是亞洲的驕傲，並首先在中國發佈。 」 Etu 知意圖負責人蔣居裕在 HBTC 2012 大會上如此表示。

來自Etu 知意圖的大資料系統架構專家施宏良 (Jason Shih) 先生，也和與會嘉賓一起做了「從 Hadoop 安全架構部署實施到高等服務的演變」的精彩分享，施宏良先生認為目前使用 Hadoop 的開源框架， 組織和管理龐大的資料量已經成為解決快速資料處理和提高分析能力的趨勢。 但企業對於資料與集群系統的安全有更高的要求，從不同層面或者存取權限上分離敏感資訊和隔離共用存儲或電腦設備。 在 Hadoop 0.20 之前的版本中，類似 Unix 的檔許可權已經提及並提供集群內的簡單身份驗證機制，但缺乏存取控制每個作業佇列，控制提交等操作。 為了使用新的安全功能，Etu Appliance 2.0 集成了 Kerberos 網路認證協定，使其具備強大的身份驗證和授權，保證嚴格的存取控制資料，資源和隔離之間運行的任務。 施宏良先生分享了基於 Kerberos 的 Hadoop 安全集群環境的基礎設施部署細節以及如何以此實現高層次的服務。 通過 Etu Appliance 的快速部署和自動化系統內置的跨域認證機制，實現現有的活動域與外部 LDAP 域的交互操作，並有效減少集成和操作的管理員開銷。

2012 年 5 月，Etu 知意圖正式在北京發佈了基於 Hadoop 的 Etu Appliance 知意圖大資料一體機。 同年 10 月，又針對電子商務的行業特徵推出具有針對性的解決方案知意圖精准推薦系統 Etu Recommender。 標誌著 Etu 知意圖以 Etu Appliance 知意圖大資料一體機為資料處理平臺為基礎，支撐多種行業應用的「一橫多縱」產品走向初步建立。

　　大資料起源于互聯網，因而使用大資料的人才大多也紮根互聯網。 為了改善「人才瓶頸就是技術瓶頸」的現狀，Etu 知意圖為了更好的説明中國使用者實現 Hadoop 大資料處理與分析價值，特別在北京建立了 Hadoop 開發原廠團隊和技術支援小組，Etu 知意圖大資料一體機降低 Hadoop 採用上的系統門檻，説明企業跨越大資料處理基礎架構的障礙。 Etu 知意圖清楚的知道 Hadoop 等技術是實現大資料的技術手段，讓企業發現資料背後的價值，集中精力透過資料尋找新的商業機會上才是大資料的核心意義。