大資料技術

標籤：使用   os   檔案   資料   art   re   問題   c   

Hadoop MapReduce思維模式轉變的催化劑是大量新技術的誕生，它們能夠處理大資料分析所帶來的3個V的挑戰。紮根於開源社區，Hadoop已經是目前大資料平台中應用率最高的技術，特別是針對諸如文本、社交媒體訂閱以及視頻等非結構化資料。除Distributed File System之外，伴隨Hadoop一同出現的還有進行大資料集處理MapReduce架構。根據權威報告顯示，許多企業都開始使用或者評估Hadoop技術來作為其大資料平台的標準。NoSQL資料庫我們生活在一個有趣的時代，相對穩定的資料庫市場中還在出現一些新的技術，而且在未來幾年，它們會發揮作用。事實上，NoSQL資料庫在一個廣義上派系基礎上，其本身就包含了幾種子技術。總體而言，他們關注關係型資料庫引擎的限制，如索引、流媒體和高訪問量的網站服務。在這些領域，相較關係型資料庫引擎，NoSQL的效率明顯更高。記憶體分析在Gartner公司評選的2012年十大戰略技術中，記憶體分析在個人消費電子裝置以及其他嵌入式裝置中的應用將會得到快速的發展。隨著越來越多的價格低廉的記憶體用到資料中心中，如何利用這一優勢對軟體進行最大限度的最佳化成為關鍵的問題。記憶體分析以其即時、高效能的特性，成為大資料分析時代下的“新寵兒”。如何讓大資料轉化為最佳的洞察力，也許記憶體分析就是答案。大資料背景下，使用者以及IT供應商應該將其視為長遠發展的技術趨勢。整合裝置隨著資料倉儲裝置(Data Warehouse Appliance)的出現，商業智慧以及大資料分析的潛能也被激發出來，許多企業將利用資料倉儲新技術的優勢提升自身競爭力。整合裝置將企業的資料倉儲硬體軟體整合在一起，提升查詢效能、擴充儲存空間並獲得更多的分析功能，並能夠提供同傳統資料倉儲系統一樣的優勢。在大資料時代，整合裝置將成為企業應對資料挑戰的一個重要利器。