大資料將有大發展

迄今為止，大資料尚沒有一個公認的定義，也就是說，你說的大資料和我說的大資料可能不是一回事情，但這並不能夠阻止大資料應用成為公認的發展趨勢。 據IDC報告顯示，未來四年大資料超市顯著增長，在此期間線上資料資訊將呈爆炸式增長。 據IDC預測，2017年大資料技術和服務市場複合年均增長率(CAGR)預計為27%，市場規模達到324美元(詳見：2017年大資料超市價值324億美元)，其增幅度是ICT(資訊和通信技術)市場6倍。 其中，IDC亞太區(不含日本)大資料超市規模將會從2012年的5.48億美元增加到2017年的23.8億美元，年複合增長率達到34.1%，超出全球平均增幅（詳見：2017年大資料技術和服務市場規模23.8億美元）。 所有跡象表明，大資料時代正在向我們走來。

大資料技術和服務驅動力

大資料成為趨勢意味著巨大的市場商業機會。 大資料特性可以用資料量大(Volume)、資料種類多樣(Variety)、要求即時性強(Velocity)和蘊藏商業價值大(Value)，也就是4個V來概括。 這4個V也對資料處理和存儲提出了新的要求。

為了應對大資料技術和服務新挑戰，很多廠商都推出了大資料一體機平臺，如IBM的Netezza一體機、Oracle的Exadata一體機、EMC的Greenplum一體機、浪潮雲海大資料一體機和曙光的XData大資料一體機等。 這些大資料一體機大多以Hadoop為管理平臺，針對海量非機構化資料進行分佈存儲和管理，實現了資料分散式存儲和當地語系化就近處理，具有橫向靈活擴展的功能和特性。 為增加應用的針對性，這些平臺廠商與應用軟體方案商合作，為使用者提供大資料應用整體解決方案。

軟體系統廠商也是大資料應用的積極推動者。 資料分析、挖掘原本是傳統資料庫廠商、資料倉儲和BI廠商的強項。 以往其應用主要針對結構化資料，而海量非結構化、半結構化資料因為價值密度低，不適用傳統方法，其成本過高。 但是隨著計算、存儲等硬體成本的不斷降低，特別是Hadoop、NFS等分散式資料存儲和處理技術的成熟，通過Map/Reduce等資料處理方式，使得大資料處理成為了可能。 在這種情況下，無論是IBM、Oracle、SAP等資料庫廠商，還是Teradata、Informatica等資料倉儲廠商，還是傳統BI廠商，如SAS等，都針。

對大資料應用提供針對性的技術和方案。 基於自然意義的理解，對於資料進行篩選、抽取和聚合，這原本就是這些廠商的優勢，針對大資料應用需求原本也不存在更多難題

除了傳統軟硬體產品供應商之外，以Splunk、ICTCLAS為代表國內外大資料應用軟體廠商和技術，也提供了落地解決方案。 此外，Apache Drill、Storm等開源工具，MySQL、Hlive等開源資料庫在互聯網行業廣泛使用。

資料開放是關鍵

大資料應用之所以得到廣泛追捧，全資料分析是關鍵。 專家指出，資料不怕多，哪怕是錯誤的資料，資料越多越好，透過大資料分析，會有一些意想不到的效果。

大資料所研究的不僅是資料本身，也包括資料之間的關係。 互聯網行業在大資料應用方面處於領先的定位，無論Ad Network、Ad Exchange、DSP、SSP、RTB、DMP等廣告精准投放方式，還是電商的消費者者行為分析、商品推薦，互聯網金融等都是建立在大資料分析的基礎之上， 因此在互聯網行業，大資料應用早已經不是概念，而是一個個落地的專案和商業模式。

大資料應用也是在互聯網行業的推動下，像更加廣闊的領域延伸。 以互聯網為楷模，大資料應用可以説明傳統行業/企業改善服務，提高市場的競爭力。 大資料應用強調的是結果，有時候，你可能不知道原因，但大資料會告訴你結果和結論。 一些爭論不休的問題，可以通過大資料分析得到結果。 例如透過對吸煙和癌症發病的資料分析比對，科學家發現，吸煙並沒有導致癌症發病率顯著提高。 這是一個結果，其科學原因還有待研究和挖掘。

大資料分析結果的正確率有賴於資料的完整性。 傳統行業多年積累了大量資料，也是資料的持有者。 但從整體來看，某一個企業或者行業也僅僅是資料的部分持有者，為了最大化發揮資料價值，資料開放就是必然之路。 奧巴馬在謀求總統連任的過程中，就把促進政府部門資料開放作為目標策略之一。

可以預見，大資料軟硬體技術的成熟，資料共用和開放將成為十分迫切的問題，在資料開放的同時，如何做到資料的合理使用，同時保護資料的隱私問題，將成為大資料發展的新 課題，需要相關的法律制度。 資料開放將成為大資料應用的催化劑，也有可能成為大資料的應用的絆腳石。

專家指出，在當今環境條件下，行業/企業一方面要加強對於社會化大資料，如互聯網、智慧社區資料的利用;另外一方面，行業/企業也應該盡可能實現企業管理的數位化，特別是加強對於email、即時通訊軟體等資料的管理和保護，因此， 大資料應用需求將極大提升行業/企業資料管理和保護的意識，這些將是無形的財富，也保持行業/企業競爭力的資料基礎。