第五屆中國雲計算大會于2013年6月5-7日在北京國家會議中心拉開帷幕。 本次大會以國際視野,洞悉全球雲計算發展趨勢,並從應用出發,探討雲計算與大資料、雲計算與移動互聯網、雲安全及雲計算行業應用等焦點話題。 大會還特別設立了雲計算服務展示區域,交流國際雲計算最新研究成果,展示國內雲計算試點城市發展成就,分享雲計算發展經驗,促進全球雲計算創新合作。
在Pivotal全球業務發展與策略副總裁David Menninger看來,大資料改變世界。 使用資料的方法也要變化,只有這樣,企業才能獲得發展的優勢。 「過去通過資料倉儲在進行BI分析。 90%的支出也都在這方面。 企業中,很多時間都在這些工作中:整合、彙聚、分析。 而這些工作很複雜,先對資料機構做分析,然後在匯總。 10%上用在這些方面,在2天前國內的EMC舉辦的CIO座談會,用Hadoop的企業為數不多。 但我們可以感受到,有些企業已經先行。 」
Pivotal全球業務發展與策略副總裁 David Menninger
資料存儲,需要成本和性能的平衡考慮。 Hadoop改變了經濟圖譜。 分散式系統可用實現並行存儲和並行分析,並在不同分散式資訊上,可用實現不同的分析。 性價比要高出十倍。 結構化資料是過去的,5年前,可用作結構化資料並行分析,一般一個特殊處理要10萬美元。 今天,用Hadoop,同樣資訊量,可用一個節點2000美元就可以完成。
一個新時代到來了。 其中的變化是巨大的。 比如,Hadoop將成本降低,性價比優勢更加明顯。 而現在也有不同辦法在做資料分析,歷史資料中,簡單分析是可以實現的。 而現在如此海量,簡單工具不再有用。 為此,出現了一個新的概念——數位科學(對應的是,資料科學家)。
將資料所隱藏的知識抽象出來,達到為商務和其他應用服務的目的。 而今,資料仍然可以放到資料倉儲或資料集市中進行分析。 但對更多非結構化資料,比如客戶關係和客戶價值等分析,需要新的技術和工具。 比如一種新產品投入市場前,各類預測和市場行銷手段預估的方案。 比如通過對使用者的行為習慣、存在時間、能帶來多少潛在價值等的評估。 舉個例子,通過對客戶30天,30天以後的客戶價值的預測和分析會,訂購和支付等行為分析等來對銷售、行銷方案所帶來的深入影響。
新資料來源,非結構資料將帶來更多變化。 比如,語音變成文本進行分析,收集社交媒體網路上的評價等,將會説明企業更全面的瞭解客戶。 北美一家企業,在不同系統間交互的過程需要檢測,比如每個產品帶來的獲利率,每個客戶的獲利率等。 他們需要處理的資料量很大(6-11TB),而通過我們的方案獲得了很好的成果。 另外,還有通過社交網路瞭解客戶忠誠度的分析。
在他看來,系統管理方面,有三方面的難題:生成的資料量,定性與定量的資訊,總體客戶體驗期望很高。 「我們可以提供的解決方案,客戶與合作夥伴回饋系統,監控關鍵西能拿指標,系統品質和行為的建模等。 這樣可以得到妥善的解決。 」
Pivotal,是EMC家族的新成員,其中EMC占62%、VMware占28%、GE占10%(GE看到了大資料發展前景,願意參與進來)。
在第三個平臺上,消費者將佔據主流。 為此,後臺需要更加強大。 專有資料中心和基礎架構,google,facebook,amazon和yahoo!。 高度自動化規模化運行,而在消費者級別上,會有非常大變化,具體來看就是:海量資料的存儲和計算、快速應用程式開發、接受海量事件並即時回應,與傳統應用程式和基礎架構交互。
Pivotal One是新平臺,包含三大部分:資料結構、應用程式結構、雲結構。 其中,HAWQ是很獨特的,既有HBase也有MPPSQLbase,更好實現資料的流轉和分析。 在HAWQ的Benchmarks中,數值非常高。
這兩張圖含金量極高。 技術開發者請注意。
其中,支援快速應用程式開飯,易於在開發、測試和生產之間移動,可針對多種語言和框架自動進行部署和擴展,行業領先的JAVA/Spring運行時支援,鬆散耦合即時服務綁定,預設採用分析儀錶化和視覺化。 資料結構是Spring和vFabric。 應用程式結構包含三方面:語言和框架、服務和分析。 另外,Pivotal Labs也值得注意。
David Menninger表示:「Pivotal現在1200人,700人都是工程師,未來將做的更好。 Pivotal 代表著轉變,新時代需要新平臺,為企業提供消費者級的功能。 」
(責任編輯:蒙遺善)