日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

HDFS常用Shell命令

發(fā)布時(shí)間:2025/3/8 编程问答 14 豆豆
生活随笔 收集整理的這篇文章主要介紹了 HDFS常用Shell命令 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

1、-ls: 顯示目錄信息

hadoop fs -ls /

2、-mkdir:在HDFS上創(chuàng)建目錄

hadoop fs -mkdir -p /demo/test

3、-moveFromLocal:從本地剪切粘貼到HDFS

hadoop fs -moveFromLocal a.txt /demo/test/a.txt

4、-appendToFile:追加一個(gè)文件到已經(jīng)存在的文件末尾

hadoop fs -appendToFile b.txt /demo/test/b.txt

5、-cat:顯示文件內(nèi)容

hadoop fs -cat /demo/test/b.txt

6、-chgrp 、-chmod、-chown:Linux文件系統(tǒng)中的用法一樣,修改文件所屬權(quán)限

hadoop fs -chmod 777 /demo/test/b.txt

7、copyFromLocal:從本地文件系統(tǒng)中拷貝文件到HDFS路徑去

hadoop fs -copyFromLocal b.txt /demo/test/b.txt

8、-copyToLocal:從HDFS拷貝到本地

hadoop fs -copyToLocal /demo/test/b.txt /address

9、從HDFS的一個(gè)路徑拷貝到HDFS的另一個(gè)路徑

hadoop fs -cp /demo/test/b.txt /demo/test2/b.txt

10、-mv:在HDFS目錄中移動(dòng)文件

hadoop fs -mv /demo/test/b.txt /demo/test2/b.txt

11、-get:等同于copyToLocal,就是從HDFS下載文件到本地

hadoop fs -get /demo/test/b.txt /address

12、-getmerge:合并下載多個(gè)文件,比如HDFS的目錄 /user/atguigu/test下有多個(gè)文件:log.1, log.2,log.3,…

hadoop fs -getmerge /user/test/* /address

13、-put:等同于copyFromLocal

hadoop fs -put ./zaiyiqi.txt /user/atguigu/test/

14、-tail:顯示一個(gè)文件的末尾

hadoop fs -tail /demo/test2/b.txt

15、-rm:刪除文件或文件夾

hadoop fs -rm /demo/test2/b.txt

16、-rmdir:刪除空目錄

hadoop fs -mkdir /test

17、-du統(tǒng)計(jì)文件夾的大小信息

hadoop fs -du -s -h /user/atguigu/test 2.7 K /user/atguigu/testhadoop fs -du -h /user/atguigu/test 1.3 K /user/atguigu/test/README.txt 15 /user/atguigu/test/jinlian.txt 1.4 K /user/atguigu/test/zaiyiqi.txt

18、-setrep:設(shè)置HDFS中文件的副本數(shù)量

hadoop fs -setrep 10 /demo/test2/b.txt

這里設(shè)置的副本數(shù)只是記錄在NameNode的元數(shù)據(jù)中,是否真的會(huì)有這么多副本,還得看DataNode的數(shù)量。副本數(shù)達(dá)到相應(yīng)數(shù)量的前提是設(shè)備數(shù)達(dá)到相應(yīng)的數(shù)量。

19、-help:輸出這個(gè)命令參數(shù)

hadoop fs -help rm

總結(jié)

以上是生活随笔為你收集整理的HDFS常用Shell命令的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。