日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > Ubuntu >内容正文

Ubuntu

Hadoop0.20.2版本在Ubuntu下安装和配置

發布時間:2023/11/30 Ubuntu 59 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Hadoop0.20.2版本在Ubuntu下安装和配置 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

1、安裝JDK
  (1)下載安裝JDK:確保計算機聯網之后命令行輸入下面命令安裝JDK
  sudo apt-get install sun-java6-jdk
  (2)配置計算機Java環境:打開/etc/profile,在文件最后輸入下面內容
  export JAVA_HOME = (Java安裝目錄)
  export CLASSPATH = ".:$JAVA_HOME/lib:$CLASSPATH"
  export PATH = "$JAVA_HOME/:PATH"
  (3)驗證Java是否安裝成功
  輸入 java -version ,輸出Java版本信息即為安裝成功。

  2、安裝配置SSH

  (1)下載安裝SSH:同樣在命令行輸入下面命令安裝SSH
  sudo apt-get install ssh
  (2)配置無密碼登錄本機:在命令行輸入下面兩條命令
  ssh-keygen -t dsa -P " -f ~/.ssh/id_dsa
  cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
  (3)驗證SSH是否安裝成功
  輸入 ssh localhost 。如果顯示本機登錄成功就表明安裝成功。

  3、安裝運行Hadoop(以0.20.2版本為例)

  (1)下載Hadoop:在http://www.apache.org/dyn/closer.cgi/hadoop/core/頁面上下載Hadoop。

  (2)安裝配置Hadoop

  單節點配置:
  安裝單節點的Hadoop無需配置,在這種方式下,Hadoop被認作為一個單獨的Java進程。
  偽分布配置:
  偽分布的Hadoop是只有一個節點的集群。在這個集群中,計算機既是master也是slave,即使 namenode也是datanode,既是jobtracker也是tasktracker。

  配置的過程如下:

  a、進入conf文件夾修改下面的文件。
  Hadoop-env.sh中加入下面內容:
  export JAVA_HOME = (JAVA安裝目錄)
  core-site.xml文件內容修改為下面內容:
  <configuration>
  <property>
  <name>fs.default.name</name>
  <value>hdfs://localhost:9000</value>
  </property>
  </configuration>
  hdfs-site.xml文件內容修改為下面內容:
  <configuration>
  <property>
  <name>fs.replication</name>
  <value>1</value>
  </property>
  </configuration>
  mapred-site.xml文件內容修改為下面內容:
  <configuration>
  <property>
  <name>mapred.job.tracker</name>
  <value>localhost:9001</value>
  </property>
  </configuration>

  b、格式化Hadoop文件系統,在命令行輸入命令:
  bin/hadoop namenode -format

  c、啟動Hadoop,在命令行輸入命令:
  bin/start-all.sh

  d、驗證Hadoop是否安裝成功,在瀏覽器中輸入下面網址,如果正常打開說明安裝成功。
  http://localhost:50030?(mapreduce的web頁面)
  http://localhost:50070?(hdfs的web頁面)

總結

以上是生活随笔為你收集整理的Hadoop0.20.2版本在Ubuntu下安装和配置的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。