日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 运维知识 > windows >内容正文

windows

windows环境搭建hadoop

發(fā)布時間:2023/12/20 windows 33 豆豆
生活随笔 收集整理的這篇文章主要介紹了 windows环境搭建hadoop 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

1、下載hadoop

下載hadoop2.5.2.tar.gz?,并解壓到你想要的目錄下,我放在E:\hadoop-2.5.2

2、配置環(huán)境變量

2.1windows環(huán)境變量配置

右鍵單擊我的電腦 –>屬性 –>高級環(huán)境變量配置 –>高級選項卡 –>環(huán)境變量 –> 單擊新建HADOOP_HOME,

?

2.2接著編輯環(huán)境變量path,將hadoop的bin目錄加入到后面;

?

3、修改配置文件

編輯“E:\hadoop-2.5.2\etc\hadoop”下的core-site.xml文件,將下列文本粘貼進(jìn)去,并保存;

<configuration><property><name>hadoop.tmp.dir</name><value>/E:/hadoop-2.5.2/workplace/tmp</value></property><property><name>dfs.name.dir</name><value>/E:/hadoop-2.5.2/workplace/name</value></property><property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property> </configuration>

編輯“E:\hadoop-2.5.2\etc\hadoop”目錄下的mapred-site.xml(沒有就將mapred-site.xml.template重命名為mapred-site.xml)文件,粘貼一下內(nèi)容并保存;

<configuration><property><name>mapreduce.framework.name</name><value>yarn</value></property><property><name>mapred.job.tracker</name><value>hdfs://localhost:9001</value></property> </configuration>

編輯“E:\hadoop-2.5.2\etc\hadoop”目錄下的hdfs-site.xml文件,粘貼以下內(nèi)容并保存。請自行創(chuàng)建data目錄,在這里我是在HADOOP_HOME目錄下創(chuàng)建了workplace/data目錄;

<configuration><!-- 這個參數(shù)設(shè)置為1,因為是單機(jī)版hadoop --><property><name>dfs.replication</name><value>1</value></property><property><name>dfs.data.dir</name><value>/E:/hadoop-2.5.2/workplace/data</value></property> </configuration>

編輯“E:\hadoop-2.5.2\etc\hadoop”目錄下的hadoop-env.cmd文件,將JAVA_HOME用 @rem注釋掉,編輯為JAVA_HOME的路徑,然后保存;

@rem set JAVA_HOME=%JAVA_HOME% set JAVA_HOME=C:\PROGRA~1\Java\jdk1.8.0_261

?

注意:

如果jdk在Program Files文件夾中,將Program Files改為PROGRA~1,因為Program Files之間有空格,否則會報錯

Error: JAVA_HOME is incorrectly set. Please update E:\hadoop-2.5.2\conf\hadoop-env.cmd

4、替換文件

下載到的hadooponwindows-master.zip,解壓,將bin目錄(包含以下.dll和.exe文件)文件替換原來hadoop目錄下的bin目錄

5、運(yùn)行環(huán)境

運(yùn)行cmd窗口,執(zhí)行“hdfs namenode -format”;

?

運(yùn)行cmd窗口,切換到hadoop的sbin目錄,執(zhí)行“start-all.cmd”,它將會啟動以下進(jìn)程

成功后,如圖:

?

?

?

?

總結(jié)

以上是生活随笔為你收集整理的windows环境搭建hadoop的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。