大資料:抓住機遇 保存價值

來源:互聯網
上載者:User
關鍵字 大資料 我們 即時 抓住機遇

今天,資料比以往任何時候都更加根植于我們生活中的每個角落。 我們試圖用資料去解決問題、改善福利,並且促成新的經濟繁榮。 伴隨著資料處理能力的提升、運算與儲存成本的井噴及越來越多的設備中嵌入各種傳感技術,資料的收集、儲存與分析正處於一個近乎無限上升的趨勢。 2011年,有人估算全世界的人們一年創造與複製的資訊量超過了1.8澤位元組,而到2013年,這個數位上升到了4澤位元組。

每一天,全世界會上傳超過5億張圖片,每分鐘就有20小時時長的視頻被分享。 然而,即使是人們每天創造的全部資訊——包括語音通話、電子郵件和資訊在內的各種通信,以及上傳的全部圖片、視頻與音樂,其資訊量也無法匹及每一天所創造出的關於人們自身的數位資訊量。

這樣的趨勢會持續下去。 我們現在還處於所謂「物聯網」的最初級階段,而隨著技術成熟,我們的設備、交通工具和迅速發展的「可穿戴」科技將能互相連接與溝通。 科技的進步已經使創造、捕捉和管理資訊的成本降至2005年的六分之一,而從2005年起,用在硬體、軟體、人才及服務之上的商業投資也增長了整整50%,達到了4000億美元。

大資料的定義有很多,對於電腦科學家、金融分析師亦或是力圖爭取風險投資的企業家,這個定義都不盡相同。 大多數的定義反映出了一種捕獲、總和與分析更大規模、更高速、更多樣的資料的技術能力。 換句話說,「現在人們可以更快地獲取資料,資料涵蓋更廣闊的領域,衡量資料的數量級也是過去所達不到的。 」更準確地說,大資料集就是「產生于設備、感應器、網路交易、電子郵件、視頻、點擊流等當今與未來各種可能的數碼資源,更大、更多樣、更複雜、更長縱深的分散性資料集。 」

不論我們如何定義大資料這種科技現象,大資料分析所具有的無限潛力都對我們的法律、倫理及社會規範發起了挑戰,考驗我們能否在大資料的世界中保護隱私和其他價值觀。 前所未有的運算能力帶給了我們不可思議的發現、創新,並推動著我們生活品質的進步。 然而,大多數普通消費者卻難以看到這種力量,所以這也造成了掌握資料的人與有意無意間提供資料的人之間權力的不對等。 所以,比「大資料是什麼」更加重要的是,「大資料能做到什麼」,以及個人與資料收集者之間的關係。

那麼,大資料的精彩之處究竟是什麼? 下文將界定什麼是大資料真正創新、真正不同的東西。 要研究大資料,我們需關注那些數量之龐大、種類之繁多、傳送速率之快使傳統資料捕捉分析方式無法勝任的資料,這樣的特徵被約定俗稱為「三個V」(規模Volume,種類Varity,速度Velocity)。 不斷降低的收集、儲存、處理資料成本,以及越來越多的新資料來源如感應器、相機、定位裝置等觀察性設備的出現,使得我們如今身處於一個資料獲取無處不在的世界。 資料的收集和處理量是前所未有的。 可聯網設備、可穿戴科技和高級感應器監測著從生命跡象到能量使用再到慢跑者步速的一切,這樣的資料爆炸對運算能力提出了更高的要求,也將會推動更複雜資料管理技術的發展。

資料不僅僅是更多了,它的來源也更加廣泛,形式也更加多元。 一些資料是「數碼原生」的,就是說它本身就是由電腦或資料處理系統創造出來的數碼資訊,比如電子郵件、網頁流覽和GPS位置資料。 另一些資料是「虛擬原生」的,也就是說它來自實體世界,但被人為轉換成數碼形式,比如手機、相機和錄影機等拍攝的音視頻,或者可穿戴設備監測下的心率、排汗等物理活動資料。 隨著資料融合能力的增強,越來越多本不相干的資料被綜合到一起,大資料將會帶給人們非同尋常的洞察力。

此外,資料收集與分析的速度正在逐漸趨於即時,這就意味著資料分析可以對人所處的環境產生即時的影響,甚至左右人們的選擇。 高速資料的典型實例是記錄使用者與網頁交互活動的點選流資料、行動裝置上的GPS即時定位資料,及各種社交媒體上的使用者分享。 客戶和公司都有更大的即時分析、即時受益的需求。 當然了,一個手機地圖應用如果不能即時、準確地定位,顯然就失去了它的意義;車載系統的即時運算也是保障我們行車安全的關鍵。

如果應用得當,大資料分析能提高經濟效率、改進消費習慣、完善政府服務,甚至挽救人的生命。 比如:

一、大資料與「物聯網」的發展具有融合工業經濟與資訊經濟的潛力。 如今,我們可以在飛機引擎和貨運汽車上裝備感應器,監測各種資料,並在需要維修的時候發出自動警報。 不僅可以降低維修成本,更能增強安全性。

二、醫療保險和醫療補助中心已經開始使用預測分析軟體標記潛在的醫保詐騙行為,防騙保系統説明即時識別高危人群,已成功防止了涉及一億一千五百萬美元的詐騙性支取,在應用此技術的第一年,每1美元的投入就獲得了3美元的收益。

三、一項大資料研究匯總了來自新生兒重症監護室的數百萬資料樣本,用以判斷哪些新生兒更容易接受致命的感染。 通過分析這些資料,這套系統不用等值班醫生注意,就能辨認出諸多感染髮生的早期徵兆,例如體溫升高、心率加速等等。 在傳統實踐中,有些早期徵兆是經驗豐富的醫師也難以注意到的。

大資料技術還在其他很多領域擁有不可限量的前景,如按需管理電網、改善能源效率、增加發展中國國家農產量,防止傳染病傳播等等。

新機遇也帶來了新挑戰。 大資料科技從龐大的資料集中獲取價值,賦予了研究者以往無法想像的洞察力。 當然,大資料的技術力量如此廣泛與深遠,我們也需要關注它對社會倫理造成的挑戰。 歷史學家克朗茲伯格(Melvin Kranzberg)在他的《科技第一法則》中寫道:「科技本身非善非惡,但它也不是中立的。 」我們應該時刻記住,科技既可以為公眾謀福利,也可能對人造成傷害。 關鍵就是,如何在機遇與挑戰間尋找到最佳的平衡。

(責任編輯:呂光)

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.