大資料2014年面臨幾道關

來源:互聯網
上載者:User
關鍵字 大資料 中國

大資料從「概念」走向「價值」,基於大資料的推薦與預測逐步流行,資料科學將興起,安全與隱私成為重要問題,大資料產業成為戰略性產業——這是中國電腦學會大資料專家委員會對「大資料」2014年十大趨勢預測中的內容。 在這份預測中,還包括資料商品化與資料共用聯盟化,大資料生態環境逐步發展等。 同時,大資料專家委員會預測,2014年,互聯網和電子商務、金融(股市預測、金融分析)、健康醫療(流行病監控和預測等),生物資訊、製藥等方面將會有令人矚目的應用。 剛剛過去的2013年,大資料在醫療、金融、電子商務和城市管理等方面應用較多。

「大資料」從2012年預熱,到2013年被各行各業所提及,各種輿論聲音紛雜,有人認為這是一個機遇,也有人認為這會是一場「泡沫」。 2014年,大資料將面臨的問題有哪些?

資料開放仍是大問題

資料應用的前提是資料開放,這已經是共識。 中國工程院院士、中國互聯網協會理事長鄔賀銓指出,中國人口居世界首位,但2010年中國新存儲的資料為250PB,僅為日本的60%和北美的7%。 目前我國一些部門和機構擁有大量資料但寧願自己不用也不願提供給有關部門共用,導致資訊不完整或重複投資。 2012年中國的資料存儲量達到64EB,其中55%的資料需要一定程度的保護,然而目前只有不到一半的資料得到保護。

去年12月14日,在中國電腦學會青年科學家論壇(YOCSEF)上,中科院地理科學與資源研究所研究員、中國工程院院士孫九林先生回顧了我國科學資料開放共用歷程:2003年, 科技部在財政部的支援下設立了科技基礎條件平臺建設專項,科學資料共用工程作為重要組成部分納入科技基礎條件平臺建設;2008年,科技部發佈973計畫資源環境領域資料匯交管理辦法;2009年,第一批科學資料共用專案驗收, 轉入運行服務階段;2011年,國家科技基礎條件平臺組織首批認定。

孫九林介紹了美國在資料開放方面的做法。 美國政府提供政策和經費保障,使資料資訊中心群成為國家資訊生產和服務基地,保障資料資訊供給不斷,利用網路把資料和資訊最便捷、及時地送到包括科學家、政府職員、公司職員、學校師生在內所有公民的桌上和家庭中, 把全社會帶進了資訊化時代。

「讓每一位公民在資料、資訊、知識、理論、決策、效益的各個環節上發揮才華,讓民眾把資料資訊流動過程中和應用過程中的各種價值充分挖掘出來,國家為他們才華的發揮和價值的挖掘帶好路、服務好、創造好環境。 」孫九林認為這就是美國政府選擇的資料資訊共用的「大迴圈」道路。 該思路在利益分配上的基本點就是讓全社會受益,讓整個國家受益。

目前,我國還沒有國家層面的專門適合資料共用的國家法律,只有相關的條例、法規、章程、意見等。

針對于大資料利用的前端——資料共用的問題,孫九林認為,十多年的資料共用取得了很大的成效,特別是全社會的共用理念得到共識,但存在的問題仍然很突出:缺少國家層面的政策,已有分散的若干意見約束力不夠, 高層管理人員對資料開放共用的深刻意義的認識有待提高;現有國家資料共用平臺難以滿足國家發展和科技創新對資料資源的需求;缺少資料開放共用的專職隊伍和相應的資料專家以及管理人才 ;缺少對專職資料共用服務人員的合理評價機制和標準等等。

急需「國家大資料戰略」宏觀統籌

「不要被大資料(Big Data)的 Big 誤導,大資料更強調的不是資料大,而是資料採礦。 」在第十屆國家資訊化專家論壇上,鄔賀銓院士指出,大資料需要更強調資料採礦利用,關鍵的是要有國家大資料戰略。

鄔賀銓提出,需要制定國家大資料發展戰略,大資料是一個應用驅動性很強的服務,其標準和產業格局尚未形成,這是我國跨越發展的機會,但切忌一哄而起在目的不明的情況下到處建設大資料中心,到處搞「資料房地產」, 而是需要從戰略上重視大資料的開發利用,將它作為轉變經濟增長方式的有效抓手。 同時,我國需要儘快制定「資訊保護法」和「資訊公開法」,既要鼓勵面向群體而且服務于社會的資料採礦,又要防止針對個體侵犯隱私的行為,提倡資料共用又要防止資料被濫用。

中國電腦學會專家委員會指出:大資料時代有兩點非常有利於中國資訊產業的發展,第一是大資料技術發開源為主,迄今為止沒有形成技術壟斷;第二點,中國的人口和經濟規模決定了中國的資料資產規模全球最大。 因此,政府、學界、產業界和資本市場應該通力合作,在確保國家資料安全的前提下,最大程度地開放資料資產,釋放大資料的巨大價值。

目前已經有一批企業開始用資料創業。 在國外已經有不少用資料提供服務、做資料分析、進行視覺化研究的公司,有些已經取得不錯的業績,甚至有很好的前景而拒絕大公司收購。 有人預測,如果國內互聯網創業者,能從海量的「垃圾」資訊中嗅出些端倪,找到某個切入點,沒准能成為行業的佼佼者。 不過,現在在國內找出個像樣的「大資料」初創公司並非易事;但也有人認為,正是有這樣的空白存在,才讓人看到機遇。

各國大資料人才緊缺

大資料人才無疑是緊缺人才。 Gartner諮詢公司預測,大資料將為全球帶來440萬個IT新崗位和上千萬個非IT崗位。 麥肯錫公司預計,美國到2018年深度資料分析人才缺口將達14萬~19萬人,能夠分析資料説明公司獲得經濟效益的技術及管理人才有150萬人的缺口。 中國能理解與應用大資料的創新人才更是稀缺資源。

IDC(互聯網資料中心)發佈預測報告稱,2017年大資料技術和服務市場將增至324億美元,實現27%的年複合增長率。 此外還預測基於大資料的決策解決方案將開始取代或影響知識工作者角色,這勢必引發人才轉型。

面對大資料人才的短缺,各國如何在培養資料科學家和資料工程師? 《2013中國大資料技術與產業發展白皮書》是由中國電腦學會大資料專家委員會歷時半年多編寫的,其中專門梳理了對大資料人才的培養。

在我國,香港中文大學從2008年起設立「資料科學商業統計」科學碩士學位;復旦大學從2007年起開設資料科學討論班,2010年開始招收資料科學博士研究生,並從2013年起開設《資料科學》課程 ;北京航空航太大學于2012年設立大資料工程碩士學位。

在美國,加州大學伯克利分校從2011年開設《資料科學導論》;伊利諾伊大學香檳分校從2011年起舉辦「資料科學暑期研究班」;哥倫比亞大學從2013年起開設《應用資料科學》課程,並從2013年起開設相關培訓專案, 還計畫從2014年起設立碩士學位,2015年設立博士學位;紐約大學從2013年秋季起設立「資料科學」碩士學位...... 在英國,鄧迪大學從2013年起設立「資料科學」科學碩士學位。

  大資料專家委員會認為,從目前各國的人才培養來看,資料科學家應掌握數學、統計學、資料分析、商業分析和自然語言處理等學科技能,具有較寬的知識面,具有獨立獲取知識的能力。 復旦大學的課程設置強調了資料科學家是研究資料的科學家,而不僅僅是一個資料工程師或者資料分析師。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.