圖說大資料基礎

標籤：

大資料開發基礎上之圖說筆記

1、Hadoop2概覽 

    1.1Hadoop2的組成、演化：

 

    1.2Hadoop2.0——Hadoop1.0演化與改進：

2、HDFS系統概覽

    2.1HDFS系統的主要特性與適用情境：

    2.2HDFS的體繫結構：

    2.3HDFS的構成

     2.4HDFS的讀流程：

 

 

 

    2.5HDFS建立子路徑流程：

 

 

 

     2.6寫流程和刪除流程

 

  

3 YARN概覽

    3.1Hadoop1.x中的MapReduce構成及特點：

 

      3.2 Yarn的結構圖和主要組件：

 

3.3 YARN的工作流程圖：

 

 

 

 4 MapReduce概覽

    4.1 MapReduce的執行流

 

 

 

    4.2 MapReduce2整體結構圖：

 

 

 

     4.3 MapReduce2的進度狀態更新圖：

 

 

 

    4.4 shuffle圖解：

 

 

 

 

 

圖說大資料基礎