Hadoop本地运行模式了解~
生活随笔
收集整理的這篇文章主要介紹了
Hadoop本地运行模式了解~
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
本地運行模式:單機運行,生產環境不用;
偽分布式模式:單機運行,但是具備Hadoop集群的所有功能,一臺服務器模擬一個分布式環境,生產環境不用;
完全分布式模式:多臺服務器組成分布式環境,生產環境使用。
本地運行模式(了解):
1.在hadoop-3.2.2文件下創建一個wcinput文件夾:
2.在wcinput文件夾下創建一個word.txt文件:
[xiaobai@hadoop102 hadoop-3.2.2]$ cd wcinput3.編輯word.txt文件:
[xiaobai@hadoop102 hadoop-3.2.2]$ vim word.txt4.回到Hadoop目錄/opt/module/hadoop-3.2.2:
執行程序:
5.查看結果:
[xiaobai@hadoop102 wcoutput]$ cat part-r-00000 hello 1 welcome 1 world 1tips:要求輸出路徑wcoutput不存在,否則報異常:org.apache.hadoop.mapred.FileAlreadyExistsException;
總結
以上是生活随笔為你收集整理的Hadoop本地运行模式了解~的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 【技术贴】解决 myeclipse打不开
- 下一篇: GCD多线程的使用