5月16日,中國雲計算領域兩大最高端實戰、權威專業的雲盛會之一的CCS雲計算高峰論壇在京召開。 NEC(中國)有限公司軟體銷售部部長李勇在「CCS雲計算高峰論壇」上,發表了「淺談大資料的應用和基礎」的主題演講,介紹了NEC在大資料方面的研究和舉措,有聽眾當場表示受益匪淺,希望與NEC深入交流。
大資料時代的背景
近年來,隨著互聯網、智慧手機及感應器等的普及,資訊流量有了爆發性的增長,根據GreenIT協定會統計,2025年,社會的資訊量將猛增至2006年的200倍。 越來越多的業內人士開始談論「大資料」,那麼是否所有龐大的資料量都可以冠以「大資料」呢? 其實不然,大資料的準確定義應該是採用既存技術或系統難以處理、分析的各種類型的大量資料,即大資料具備如下特點:
1、資料量過於龐大導致不能處理;
2、資訊處理超時,無法在合理時間內提取出説明企業經營決策的資訊;
3、需要使用複雜的,甚至至今都未使用過的資料處理方式。
大資料廣泛存在於各個核心領域,包括網路、通信、金融、物流、製造、政府。 以金融行業為例,大資料解決方案分析信用卡使用中產生的大量操作履歷,總結不同年齡段、不同性別的消費習慣和喜好,從而有針對性地制定推廣策略,除此之外,還能儘早發現非法使用情況。
大資料在核心領域的滲透速度有目共睹,然而《2010年年度資訊流通普查報告》顯示,未被使用的資訊比例高達99.4%,存在於未被使用部分的高資訊價值無法得到有效的開發、利用。 在大資料時代背景下,企業率先採取解決方案應對資料資源利用率低的問題,才能抓住大資料帶來的機遇,拉開與友商間的差距,成為行業內的領頭羊。
未被使用的資訊比例高達99.4%
大資料解決方案
大資料處理的全過程分為三個階段:
一、資料收集,收集來自感應器、機器上的資訊
二、資料加工合併,應對急速增加的資料
三、資料分析,提供各類資料的處理。
相應的,大資料整體解決方案應該提供大資料處理的所有功能,收集來自感應器的資訊,處理大量資料,通過媒體資料處理提供高附加值。 中國真正要實現大資料的落地,第一步要做的就是資料的整理和搜集,如何真正把資料進行有效的管理和存儲,是大資料廠商在中國推行大資料解決方案的挑戰,同時也是機遇。
NEC的大資料整體解決方案框架
NEC擁有完整的大資料產品線,結合客戶具體需求向客戶提供實現大資料處理的多樣化技術,和客戶共同確定利用資料的目的及分析方法,為客戶制訂個人化的大資料解決方案。
NEC的大資料技術框架圖
在資料加工、合併層面,新型資料庫軟體InfoFrame Elastic Relational Store提供靈活的擴充性和高可用性應對資料增長,解決了傳統的資料庫解決不了的橫向擴展和處理速度問題。 而InfoFrame DataBooster是基於列存儲的記憶體型高速資料處理引擎,資料處理速度比傳統RDB提高了40倍,實現了通過資料庫優化無法達到的處理速度。
李勇部長表示,NEC大資料整體解決方案就是以為客戶構建實用的資料處理平臺為目的,讓「提高資料資訊利用率」有真正可行的基礎。 NEC在進軍大資料超市的路上腳踏實地,相信未來會不斷為市場帶來更多產品和解決方案。