採用Hadoop的關鍵 小處開始大資料之旅

作為大資料技術的典範，Hadoop一直為採用大資料的企業祝福並詛咒著。 Hadoop功能強大，卻非常複雜，這使得很多企業都寧願等待更容易的東西問世，再推出大資料項目目。


　　等待已經結束。 Hadoop在穩步前進，來自諸如Hortonworks和Cloudera等廠商顯著的易用性增強，使得Hadoop的學習曲線已經減少了一半。 企業正越來越多擁抱大資料和Hadoop，目的是從基本的ETL工作負載遷移到先進的資料分析。


　　但更多人不知道的是，企業使用Hadoop處理大資料的訣竅，其實就是從小處著手。


　　小?這似乎是與Hadoop關係不大的一個詞。 但它完全符合大資料的現實。 我們往往談論Hadoop在PB級和ZB級資料的優勢，但大部分企業其實並不具備PB級規模的問題。 至少，他們現在還不清楚怎麼去管理這種級別的問題。


　　相反，大資料諮詢公司NewVantage Partners的一項調查顯示，企業首先關注的是掌握新類型的非結構化資料。 Gartner證實了這一點，它指出：「許多組織發現大資料的多樣性比大體量或即時性的挑戰更大。 」


　　因此，聰明的Hadoop廠商正在修正他們的策略，説明企業從小規模部署著手，並從那裡成長。 Hortonworks企業戰略副總裁Shaun Connolly在接受記者採訪時表示：


　　「我們已經看到可重複的採用模式，從側重于一個新的資料類型開始，並建立或增強有針對性的應用程式，圍繞新的資料類型。 這些新的應用程式通常由一個業務線驅動，並從以下新類型之一的資料開始：社交媒體，點擊流，伺服器日誌，感應器和機器資料，地理定位資料和檔(文本，視頻，音訊等)。


　　「最終部署更多的應用和新的資料類型導致更廣泛的現代化資料架構。 但成功的客戶開始從特定類型的資料釋放價值，然後沖洗，並從那裡重複他們的旅程。 」


　　對於證明Hadoop的價值，從小的、可衡量的專案啟動，這是一個偉大的方式，不強迫企業在前期就吞下整個大象。 這是一個聰明的策略，讓強大的技術可以很容易地被採納。


這樣一來，Hadoop正在變成人們真正想要談論的「房間裡的大象」。 雖然更多的人都在談論大資料，但實際推出重要的大資料項目目的組織要少得多，Gartner強調，只有8%的企業已實際部署大資料項目目，儘管64%的企業宣稱他們打算這麼做。 這些公司看重的是Hadoop大資料項目目帶來的實質性增長，可實現的商業價值，而不是Hadoop的炒作。


　　事實上，今天大多數大資料項目目，往往以現有用例的增量改進為重點，例如，更好地瞭解客戶的需求，使流程更加高效，進一步降低成本，或更好地檢測風險。 對於所有的關於大大改變一個企業的業務的談論，大部分的大資料以及由此延伸的大多數的Hadoop的部署，重點是逐步改進，而不是徹底改變的專案。


　　這是有道理的。 企業首先小步驟地採用Hadoop實施可以實現的專案，然後掌握該技術，然後再做大。


　　在2014年，我們將看到Hadoop被加速採用。 Hortonworks的Connolly和Cloudera的Mike Olson都看到了他們的業務在2013年獲得迅速的發展，且最後兩個季度的發展節奏更快。 這樣的加速度反映了他們對行銷資訊的改善，已圍繞企業如何更容易地從Hadoop真正獲得價值，同時也表明，企業從Hadoop獲得價值的門檻已經降低。


　　最後再次重複，Hadoop越專注于小規模部署，最終用於大規模部署的可能性越大。