Hadoop是大資料發展需要的開發工具

來源:互聯網
上載者:User
關鍵字 我們 大資料 開發人員 這些

大資料裡蘊藏的價值,一直是從事Hadoop和相關工具開發人員遇到困難時,激勵自己的一個動力。 一家大資料及服務供應商Wikibon做過一項調查,指出,很多公司的技術人員往往缺乏培訓來有效的使用複雜的Hadoop。

來自Continnuity公司的創始人兼CEO Jonathan Gray對此表示,培訓的目的不是要培養出許多的Hadoop專家,企業應該專注于開發更好的工具,來説明開發人員開發大資料軟體。

Continnuity公司2年前開始建立基於Hadoop的軟體發展平臺。 公司位於加州的帕洛阿爾托,目前擁有30名員工,其中三分之二是工程師。

Gray表示:「我們是一個專注于Hadoop的公司,但我們的不同點就在於我們更關心的是開發者。 」Gray告訴記者:「我們在Hadoop上已經構建了中介軟體,以及一個應用伺服器。 」

在2011年Continuuity聯合Nitin Motgi(雅虎的前身)之前,Gray曾是Facebook的軟體工程師,在哪他是早期開始使用Hadoop帶領公司HBase工程專案進行開發的人。 他們的任務就是讓開發人員更容易構建Hadoop和管理應用程式。

在Gray看來,今天很多的企業――尤其是電信、金融服務、零售和保險,這些公司都在資料中游泳,他們不清楚如何從中獲利。 這些公司往往都是Hadoop早期的消費者,也是最有可能從大資料軟體中獲益的企業。 「那麼我們做什麼呢」Gray補充道,「我們會授權給銀行10000個開發人員,但是在這些開發人員中只有3個是Hadoop的開發人員,我們就用這些來進行開發。 」

你會發現有大量的人是不需要有豐富的Hadoop專業知識的,也不需要培訓成一個成熟的資料專家。 相反,我們需要的是一個強大的用於開發大資料軟體的工具。 這是Continuuity公司希望開拓的一塊市場。 「我們將資料專家與開發人員分離,這是兩種不同的人員,很多人有點過於強調這個等式的科學部分,而沒有足夠重視開發人員。 」

在我們的生活中你會看到,硬體設備的不斷創新,像可穿戴設備、智慧汽車、智慧家居,這些所展示的正是軟體資料所驅動的。 電信公司是一個擁有大量使用者資料的位置,Gray說:「他們擁有地理資料、人口資料、網頁流覽資料。 可以說他們有著成「噸」的資料。 但有意思的是,這些公司都在問,我們怎麼把這堆資料變成美元?」

在大資料領域的競爭是很激烈的,有大量的風投公司將錢砸到Hadoop的公司裡。 Gray強調:「我們區別于其他的Hadoop公司的地方是注重開發人員以及我們的大資料應用。 如果你看那些傳統的供應商,像Cloudera和Hortonworks,他們賣的是資料倉儲,賣的是BI分析工具。 」

「當然,BI工具有它的價值所在,但你會發現很少有人關注產品和服務的資料,這些都是關於應用的,而大部分的市場沒有關注這些。 這對我們來說也是一個挑戰。 」

「不過,我們很有信心,因為我們相信大資料應用是正確的。 」

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.