篇簡單剖析MapReduce1.0和MapReduce2.0(yarn)的工作機制。

MapReduce1.0工作原理

運行整體圖

作業執行過程

關于作業的執行過程，大致分為：提交、初始化、分配任務、執行任務、更新狀態、完成 這6個步驟，可以根據以上運行圖，自行考慮在這個作業的執行過程中，以上4個獨立的實體（客戶端、JobTracker、TaskTracker、HDFS）都承擔了哪些任務，進行了哪些工作，你考慮的就是對的。不信，翻翻《Hadoop權威指南》第六章驗證一下吧

MapReduce2.0（Yarn）工作原理

Yarn框架介紹

參考網址：

總結

以上是生活随笔為你收集整理的MapReduce编程实战之“工作原理”的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。