瞭解一下大資料

標籤：blog   http   os   使用   ar   檔案   資料   2014   art   

項目開發針對的主要是企業家的應用，所以資料量算不上大資料，但是最近大資料在互連網行業的使用，作為一名程式員，應該學習新技術嗎？但是學習他僅僅是為了借鑒一下大資料的處理思想，實現的過程，針對的情境，以便在我們的項目開發中借鑒一些思想，提高開發水平。

======================================

hadoop生態系統：

CPU：hadoop的Mad-Reduce------------------------並行編程的模型機制

記憶體：HBase-基於列的NoSQL資料庫------------------Key-Value的基於HashTable的快速查詢機制

儲存：Hadfs的Distributed File System--------------------------儲存大量資料

======================

Habse：nosql資料庫

Hive：nosql的資料倉儲

hadfs：Distributed File System

sqoop：etl的工具（資料幫浦工作-做etl的過程）

zookeeper：時間同步工具------注意網路之間協調本質就是時間服務。

======================

 如果學習的話，這就是一個應該學習的技術.

部分來自：http://blog.csdn.net/woshiwanxin102213/article/details/19688393

瞭解一下大資料