大資料裡蘊藏的價值,一直是從事Hadoop和相關工具開發人員遇到困難時,激勵自己的一個動力。 一家大資料及服務供應商Wikibon做過一項調查,指出,很多公司的技術人員往往缺乏培訓來有效的使用複雜的Hadoop。
來自Continnuity公司的創始人兼CEO Jonathan Gray對此表示,培訓的目的不是要培養出許多的Hadoop專家,企業應該專注于開發更好的工具,來説明開發人員開發大資料軟體。
Continnuity公司2年前開始建立基於Hadoop的軟體發展平臺。 公司位於加州的帕洛阿爾托,目前擁有30名員工,其中三分之二是工程師。
Gray表示:「我們是一個專注于Hadoop的公司,但我們的不同點就在於我們更關心的是開發者。 」Gray告訴記者:「我們在Hadoop上已經構建了中介軟體,以及一個應用伺服器。 」
在2011年Continuuity聯合Nitin Motgi(雅虎的前身)之前,Gray曾是Facebook的軟體工程師,在哪他是早期開始使用Hadoop帶領公司HBase工程專案進行開發的人。 他們的任務就是讓開發人員更容易構建Hadoop和管理應用程式。
在Gray看來,今天很多的企業――尤其是電信、金融服務、零售和保險,這些公司都在資料中游泳,他們不清楚如何從中獲利。 這些公司往往都是Hadoop早期的消費者,也是最有可能從大資料軟體中獲益的企業。 「那麼我們做什麼呢」Gray補充道,「我們會授權給銀行10000個開發人員,但是在這些開發人員中只有3個是Hadoop的開發人員,我們就用這些來進行開發。 」
你會發現有大量的人是不需要有豐富的Hadoop專業知識的,也不需要培訓成一個成熟的資料專家。 相反,我們需要的是一個強大的用於開發大資料軟體的工具。 這是Continuuity公司希望開拓的一塊市場。 「我們將資料專家與開發人員分離,這是兩種不同的人員,很多人有點過於強調這個等式的科學部分,而沒有足夠重視開發人員。 」
在我們的生活中你會看到,硬體設備的不斷創新,像可穿戴設備、智慧汽車、智慧家居,這些所展示的正是軟體資料所驅動的。 電信公司是一個擁有大量使用者資料的位置,Gray說:「他們擁有地理資料、人口資料、網頁流覽資料。 可以說他們有著成「噸」的資料。 但有意思的是,這些公司都在問,我們怎麼把這堆資料變成美元?」
在大資料領域的競爭是很激烈的,有大量的風投公司將錢砸到Hadoop的公司裡。 Gray強調:「我們區別于其他的Hadoop公司的地方是注重開發人員以及我們的大資料應用。 如果你看那些傳統的供應商,像Cloudera和Hortonworks,他們賣的是資料倉儲,賣的是BI分析工具。 」
「當然,BI工具有它的價值所在,但你會發現很少有人關注產品和服務的資料,這些都是關於應用的,而大部分的市場沒有關注這些。 這對我們來說也是一個挑戰。 」
「不過,我們很有信心,因為我們相信大資料應用是正確的。 」