繼Cloudera與Hortonworks之後,英特爾在2月底全球同步宣佈推出Intel專屬的Hadoop分散式運算軟體,包括Hadoop發行版本(Intel Distribution)以及Hadoop管理工具Intel Manager與Intel Active Tuner,這是英特爾從2009年開始投入鉅資研究雲計算以來,首度發佈的相關軟體產品,英特爾將以開源分散式資料分析平臺Hadoop進軍雲資料超市。
英特爾DCSG亞太區總經理Jason Fedder表示,Hadoop發行版本是以英特爾的硬體為基礎,提供Hadoop消費者更安全、更容易部署、更有效率的資料處理平臺,未來英特爾還會繼續投入Hadoop的研發。 不過英特爾並不會因此就變成軟體公司。 英特爾的目標是,打造一個開放的雲資料超市生態。 因此會通過跨行業結盟來開拓Hadoop市場。
Jason Fedder表示,目前除了OEM代工廠商之外,系統集成商與獨立軟體開發商將是直接供企業部署英特爾版Hadoop的合作夥伴,英特爾則提供教育培訓。 目前已與20多家軟硬體廠商有意結盟,包括SAP、思科、SAS、1degreenorth、Revolution Analytics等。
英特爾推出的Hadoop專屬軟體平臺,主要包括三個部分,第一是Hadoop平臺的管理工具,其二則是基於Hadoop框架所做的特殊強化,包括HDFS、MapReduce以及HBase都有重新改寫, 同時並支援SQL查詢指令語言Hive,對於SQL指令的查詢速度提升了8.5倍。 其三,英特爾的Hadoop架構中,也納入了其他常用的Hadoop工具,例如:Zookeeper等。
英特爾DCSG亞太區總監Patrick Buddenbaum表示,由於英特爾重新改寫了Hadoop框架,可以直接支援Xeon進階運算加密指令集AES-NI,來提高資料運算速度,還能讓資料收集、儲存到HBase的過程, 可以被晶片原生的加密功能保護,而效能又不會因為加密受到影響。 Patrick Buddenbaum表示,採用Xeon E5-2690處理器、搭配英特爾SSD 520固態硬碟和10GbE網卡,1TB的資料量處理將可縮短到7分鐘。
在此之前,英特爾曾經推出HiBench,作為部署Hadoop系統效能調校的參考指標。 Patrick Buddenbaum表示,目前英特爾所推出的Hadoop軟體,將以訂閱模式供應商用客戶,在產品正式推出前,包括中國移動、中國聯通、Nextbio以及英特爾內部都已經率先部署。 如中國移動部署了133個Hadoop節點來處理每個月30TB的帳務資料。