王家林的“雲端運算分布式大資料Hadoop實戰高手之路—從零開始”的第十一講Hadoop圖文訓練課程：MapReduce的原理機制和流程圖剖析

這一講我們主要剖析MapReduce的原理機制和流程。

 

“雲端運算分布式大資料Hadoop實戰高手之路”之完整發布目錄

 

雲端運算分布式大資料實戰技術Hadoop交流群：312494188，每天都會在群中發布雲端運算實戰性資料，歡迎大家加入！

 

關於MapReduce，你至少需要知道以下幾點：

1，         MapReduce是運行於Distributed File System之上的，在Hadoop中就是運行於HDFS之上的；

2，         MapReduce主要用於大規模資料的並行運算，這種大資料通過指1TB以上；

3，         MapReduce的運行原理是把一個大任務切割成很多並行啟動並執行小任務，然後合并小任務運行完後的結果，從而得到最終結果；

是MapReduce運行過程圖：