日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

hadoop基本操作命令小结

發布時間:2023/12/9 编程问答 24 豆豆
生活随笔 收集整理的這篇文章主要介紹了 hadoop基本操作命令小结 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

啟動和關閉Hadoop

啟動Hadoop?
1.進入HADOOP_HOME目錄。?
2.執行bin/start-all.sh

關閉Hadoop?
1.進入HADOOP_HOME目錄。?
2.執行bin/stop-all.sh

?

HDFS文件文件系統操作 Hadoop使用的是HDFS,能夠實現的功能和我們使用的磁盤系統

類似。并且支持通配符,如*。

?
查看文件列表?
查看hdfs中/user/hadoop目錄下的文件和目錄。?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop fs -ls /user/hadoop

列出hdfs中/user/hadoop目錄下的所有文件(包括子目錄下的文件)。?
1.進入HADOOP_HOME目錄。?
2.執行sh bin/hadoop fs -lsr /user/hadoop

?

創建文件目錄?
查看hdfs中/user/hadoop目錄下再新建一個叫做newDir的新目錄。?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop fs -mkdir /user/hadoop/newDir

?

刪除文件?
刪除hdfs中/user/hadoop目錄下一個名叫needDelete的文件?
1.進入HADOOP_HOME目錄。?
2.執行sh bin/hadoop fs -rm /user/hadoop/needDelete

刪除hdfs中/user/hadoop目錄以及該目錄下的所有文件?
1.進入HADOOP_HOME目錄。?
2.執行sh bin/hadoop fs -rmr /user/hadoop

?

上傳文件?
上傳一個本機/home/hadoop/newFile的文件到hdfs中/user/hadoop目錄下?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop fs –put /home/hadoop/newFile /user/hadoop

?

下載文件?
下載hdfs中/user/hadoop目錄下的newFile文件到本機/home/hadoop/newFile中?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop fs –get /user/hadoop/newFile /home/hadoop/newFile

?

查看文件內容?
查看hdfs中/user/hadoop目錄下的newFile文件?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop fs –cat /home/admin/newFile

?

MapReduce Job操作?
提交MapReduce Job?
原則上說,Hadoop所有的MapReduce Job都是一個jar包。

運行一個/home/hadoop/ hadoop-0.20.2/job.jar的MapReduce Job?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop jar job.jar [jobMainClass] [jobArgs]

殺死某個正在運行的JOB 假設Job_Id為: job_201112161201_0069?
1.進入HADOOP_HOME目錄。?
2.執行sh bin/hadoop job -kill job_201112161201_0069

?

更多Hadoop的命令?
上面介紹的這些Hadoop的操作命令是我們最常用的。如果你希望了解更多,可以按照如下的方式獲取命令的說明信息。?
1.進入HADOOP_HOME目錄。?
2.執行bin/hadoop?
可以看到更多命令的說明信息

轉載于:https://www.cnblogs.com/huidaoli/articles/4632753.html

總結

以上是生活随笔為你收集整理的hadoop基本操作命令小结的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。