關於大資料的概念,業界眾說紛紜。 其中最著名的是權威研究機構Gartner給出的定義:大資料是超出常用硬體環境和軟體工具在可接受的時間內為其使用者收集、管理和處理資料的能力。 大資料的「大」並非單純的資料容量,資料的速度、複雜度和多樣性都是大資料的關鍵特徵。 大資料往往來自全新的資料來源,其中非結構化資料是絕對的主力軍。 非結構化資料是指那些不方便使用資料庫二維邏輯表來表現的資料,包括所有格式的辦公...
全球各地越來越多的體育運動正在利用大資料對運動員進行評估、制訂新的戰略計畫以保持他們良好的競技狀態。 2013年麻省理工學院斯隆體育分析大會(2013 MIT Sloan Sports Analytics Conference)最近在劍橋舉行,分享關於大資料和體育結合的新成果。 相對商業領域來說,資料分析在體育領域還是一個比較新鮮的詞彙。 利用尖端的科技,我們通過強大的電腦去分析大量資料,預...
這些天,一季度的經濟資料正陸續發佈,平穩增長的背後,中國經濟正試圖尋找著創新和改革的升級路徑。 為了捕捉中國經濟升級的新動向,《新聞聯播》推出系列報導《升級進行時》,今天播出「當小企業遇到了大資料」。 金國南是一家服裝小企業的老闆,一季度的銷售情況讓他有些吃驚,對國外市場的銷售額比去年同期增了70%。 可是記者問他貨賣到哪去了,他卻一頭霧水。 雪宇騰制衣有限公司總經理金國南:「我們自己都...
「大資料(BigData)」,從一個海外生詞變成了國內熱詞。 其中,兩個大資料經典案例被津津樂道:其一,谷歌公司利用海量搜索資料,成功預測2013年美國流感暴發;其二,微軟公司通過大資料分析處理,對新一屆奧斯卡金像獎作出「預言」,結果除「最佳導演」外,其餘13項大獎全部命中。 一時間,人們對各類大資料應用暢想紛紛,那麼身處大資料時代的上海,可以有何作為? 資料富礦:沉睡還是說話 資訊爆炸時代...
近日, IT&通信領先企業NEC應用大資料分析技術,成功開發出 「大型設備故障預兆監測系統」,可應用於發電站、工廠等大型設施的故障監測。 通過該系統,操作員可從龐大的資訊量裡自動定義出設備的健全運行狀態,通過同即時資料進行對比分析,在設備故障前發現異狀。 由於在系統中融入了NEC專利的感應器資訊大資料分析技術--Invariant,操作員無需進行複雜設置及專業知識,可自行分辨出資料中...
20 年前,電子醫療記錄還是個新鮮物,數位音樂還只是人們的幻想,Twitter 這個詞彙還只是單純地指鳥兒唧唧喳喳的叫聲,Google 聯合創始人 Sergey Brin 還只是 Wolfram Research 的暑期實習生。 20 年後的今天,資訊革命已經為我們的生活帶來了翻天覆地的變化。 從直觀的數位上來看,大資料的規模已經讓人難以想像。 根據市場調研公司 IDC 的報告,2012 年人...
大資料是什麼?大資料能給我們帶來什麼?大家為此議論紛紛。 有人說:「大資料是什麼,資料早就有了,從淘寶、百度、騰訊建立起來就有資料進行分析,如今換個說法變個「大」字,大家在裡面討論的不亦樂乎!」 又人說:「大資料給互聯網大企業增加了巨大的成本, 圈了全國各地地盤放了龐大的資料伺服器基地,就算後期資料分析做不起來,那麼大的地也能值幾百個億。 」 也有人說:「大資料裡面有黃金,但大家不知道從數...
雲計算和大資料目前都是熱門話題,如何把兩者結合起來即在雲上實現大資料項目目,這是一個新的實踐領域。 資深資料專家David Gillman根據自己的經驗,列舉了雲上大資料方案需要考慮的基本要素,包括對資料構建即時索引、自由模式搜索與分析、監視資料並提供即時警告等,説明使用者更好地評估和選擇解決方案。 在談到如何實現雲上大資料項目目時,David強調了三個即時要素,即即時索引、即時資料和即時監控。 具...
從大資料產業掘金,對於上海的重要意義不言而喻。 最近,不少政府委辦、高校,紛紛研討「大資料產業」,希望加快產業推進步伐。 但在一片熱鬧聲中,我們是否意識到,大資料產業之「新」不僅在於技術,更在於它將深刻影響產業鏈和社會運行模式,倒逼我們營造適應新產業的新環境。 培養「資料科學家」正當時 據統計,當今世界在24小時之內,就可以產生出相當於16.8億張DVD容量的資料;產生2940億封電子郵...
工信部《關於資料中心建設佈局的指導意見》發佈 工業和資訊化部今年2月發佈《關於資料中心建設佈局的指導意見》,提出了資料中心建設和佈局的基本原則,即市場需求導向原則、資源環境優先原則、區域統籌協調原則、 多方要素兼顧原則和發展與安全並重原則。 國際資料公司(IDC)預計,全球大資料技術及服務市場2016年收入將達238億美元,接近1500億元人民幣,中國市場規模未來5年將增長近7倍。 大資料超市融...
大資料給資訊安全帶來的最大改變是通過自動化分析處理與深度挖掘,將之前很多時候亡羊補牢式的事中、事後處理,轉向事前自動評估預測、應急處理,讓安全防護主動起來。 Gartner認為,2013年將是企業大規模採用大資料技術的一年。 42%的IT主管表示其所在的企業已經投資大資料技術或者將在一年內進行相關投資。 從海量的低價值密度的結構化和非結構化資料中獲取有價值的資訊,已經成為企業IT收益的重要組成...
IBM與南非茨瓦內市合作推出一個眾包專案,來説明捕捉、分析南非配水系統的資訊。 民眾通過移動用戶端和短信發送社會參與這個專案,可以通過這個專案報告漏水、失效的水管和給水管道的總體情況。 每條更新都會為「WaterWatchers」的移動端應用的分析報告提供重要的資料點,來解決南非配水系統中的問題。 使用者可以使用WaterWatchers拍攝圖片、回答三個關於給水河道的簡單問題後,資料就會即時發...
隨著企業大資料項目目的進展,資料分析速度的重要性正日漸凸顯。 為了進一步提升大資料分析速度,IBM本週三在加州發佈了一款Hadoop大資料機,旨在説明企業使用者實現對更多種類和更大規模資料進行(更低成本地)即時分析的需求。 IBM軟體資訊管理部門總經理Bob Picciano表示: 企業正被大資料洪水圍困,作為廠商IBM必須向客戶提供更好的工具掘金大資料,這些工具必須夠快,能夠處理海量資料同時...
提起大資料,人們想到的是資料的海量、變化的快速、內容的龐雜,但這就是大資料的全部嗎? 其實在企業內部,還有這樣一些被譽為「主資料」的資料形態,它們變化不快、看似與交易無關,它們可能是客戶的訂單資訊,也可能是供應商的基本資料,但為什麼這些資料如此重要? 記者近日採訪了Informatica高級副總裁兼主資料管理營業單位總經理Dennis Moore,作為主資料管理營業單位負責人,他告訴記者:「大數...
什麼是大資料? 編輯記者們旁徵博引,試圖將資料堆砌的商業案例剔除,真正的、實用性強的資料採礦故事留下。 我們報導的是偽大資料公司? 我們是否成為《駕馭大資料》一書的作者Bill Franks所稱的「大資料騙局」中的一股力量? 同樣的質疑發生在阿裡巴巴身上。 有消息稱,3月23日,阿裡巴巴以7000萬美元收購了一家移動開發者資料統計平臺。 這引發了專家們熱烈討論,它收購的真是一家大資料公司嗎? 這些...
近幾年來,我一直在與大資料公司的高管們探討如何解決他們所遇到的問題。 一些有趣的問題仍然持續存在。 很明顯,我們仍然還處在對於某些問題的初步瞭解階段,要充分瞭解並使用有效的方案來解決這些問題,我們可能仍然還有很長的路要走。 Facebook和谷歌等公司獲取了大量的資訊。 他們普遍遭到侵犯隱私的控訴,儘管我們並不知道這些企業利用他們收集的資料資訊可以計算出關於我們的什麼資訊內容。 我們總是假設他們使...
2013年4月10日,一年一度的英特爾春季IDF技術峰會如期在北京國家會議中心召開,如大家所知,IDF每次都會展示出英特爾最新的技術動向和研究成果,同時在每天上午的大會主題演講中各位英特爾的大佬還會介紹其產品和市場策略。 天極網記者作為受邀媒體,有幸一覽這場技術盛宴。 如果先要做一個評價,那麼筆者認為,這次IDF的亮點較多,相對於桌面和移動端,英特爾此次在資料中心和行業端的展示內容含金量挺大,尤...
「社交媒體在企業行銷層面來說,更多承擔的是客戶服務的職能,而從社交上直接轉換為購買行為的比例是非常低的。 」Teradata應用部門的國際業務行銷主管Rolf Anweiler在接受ZDNet的採訪時直截了當地說明了社交媒體上的資料對於企業的行銷的意義。 目前對於很多企業來說,做行銷需要面對的客戶資料不僅僅是來自傳統的CRM系統,有著更多新興的管道影響著企業對於客戶想法的把握。 如對於零售業而...
2013年4月10日,2013年英特爾資訊技術峰會(IDF 2013)在北京國家會議中心舉行,本屆IDF主題為「未來,用」芯「體驗」,宣示英特爾更加以使用者體驗為核心,立足英特爾架構繼續擴大和深化產業合作, 全面推動計算技術創新、晶片製造創新、應用體驗創新、終端形態創新和雲端智慧創新,以強大的計算力開啟一個全新的個人化體驗新時代。 來自中國和全球各地的數千名軟硬體開發人員、技術管理人員及媒體、分析...
馬克斯·列夫琴(Max Levchin),前PayPal首席技術官,Yelp和雅虎董事會成員 據國外媒體報導,越來越多的創業公司利用Facebook、Twitter和LinkedIn等社交網站的資料給予使用者信用評級, 進而向他們提供金融信貸服務。 這些公司的評估標準包括使用者在社交網站上的關注者數量、關注者背景、教育和職場經歷,以及好友的信貸歷史等。 在美國國會1912年舉行的一...