MapReduce概述
生活随笔
收集整理的這篇文章主要介紹了
MapReduce概述
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
MapReduce概述
- 源自于Google的MapReduce論文,論文發(fā)表于2004年12月
- Hadoop的MapReduce是Google MapReduce的克隆版。與HDFS非常類似。
MapReduce是分布式框架中的計(jì)算框架。分布式其實(shí)就是將一個(gè)作業(yè)在多個(gè)節(jié)點(diǎn)上運(yùn)行,多個(gè)節(jié)點(diǎn)之間通信與高可靠性都是非常難以實(shí)現(xiàn)的。
MapReduce的優(yōu)點(diǎn)實(shí)現(xiàn)海量數(shù)據(jù)離線處理,易開發(fā),易運(yùn)行
MapReduce的缺點(diǎn)是實(shí)時(shí)流式計(jì)算。
總結(jié)
以上是生活随笔為你收集整理的MapReduce概述的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: HDFS中的safemode
- 下一篇: Map端的聚合操作Combiner