HDFS常用Shell命令
1、-ls: 顯示目錄信息
hadoop fs -ls /2、-mkdir:在HDFS上創(chuàng)建目錄
hadoop fs -mkdir -p /demo/test3、-moveFromLocal:從本地剪切粘貼到HDFS
hadoop fs -moveFromLocal a.txt /demo/test/a.txt4、-appendToFile:追加一個(gè)文件到已經(jīng)存在的文件末尾
hadoop fs -appendToFile b.txt /demo/test/b.txt5、-cat:顯示文件內(nèi)容
hadoop fs -cat /demo/test/b.txt6、-chgrp 、-chmod、-chown:Linux文件系統(tǒng)中的用法一樣,修改文件所屬權(quán)限
hadoop fs -chmod 777 /demo/test/b.txt7、copyFromLocal:從本地文件系統(tǒng)中拷貝文件到HDFS路徑去
hadoop fs -copyFromLocal b.txt /demo/test/b.txt8、-copyToLocal:從HDFS拷貝到本地
hadoop fs -copyToLocal /demo/test/b.txt /address9、從HDFS的一個(gè)路徑拷貝到HDFS的另一個(gè)路徑
hadoop fs -cp /demo/test/b.txt /demo/test2/b.txt10、-mv:在HDFS目錄中移動(dòng)文件
hadoop fs -mv /demo/test/b.txt /demo/test2/b.txt11、-get:等同于copyToLocal,就是從HDFS下載文件到本地
hadoop fs -get /demo/test/b.txt /address12、-getmerge:合并下載多個(gè)文件,比如HDFS的目錄 /user/atguigu/test下有多個(gè)文件:log.1, log.2,log.3,…
hadoop fs -getmerge /user/test/* /address13、-put:等同于copyFromLocal
hadoop fs -put ./zaiyiqi.txt /user/atguigu/test/14、-tail:顯示一個(gè)文件的末尾
hadoop fs -tail /demo/test2/b.txt15、-rm:刪除文件或文件夾
hadoop fs -rm /demo/test2/b.txt16、-rmdir:刪除空目錄
hadoop fs -mkdir /test17、-du統(tǒng)計(jì)文件夾的大小信息
hadoop fs -du -s -h /user/atguigu/test 2.7 K /user/atguigu/testhadoop fs -du -h /user/atguigu/test 1.3 K /user/atguigu/test/README.txt 15 /user/atguigu/test/jinlian.txt 1.4 K /user/atguigu/test/zaiyiqi.txt18、-setrep:設(shè)置HDFS中文件的副本數(shù)量
hadoop fs -setrep 10 /demo/test2/b.txt這里設(shè)置的副本數(shù)只是記錄在NameNode的元數(shù)據(jù)中,是否真的會(huì)有這么多副本,還得看DataNode的數(shù)量。副本數(shù)達(dá)到相應(yīng)數(shù)量的前提是設(shè)備數(shù)達(dá)到相應(yīng)的數(shù)量。
19、-help:輸出這個(gè)命令參數(shù)
hadoop fs -help rm總結(jié)
以上是生活随笔為你收集整理的HDFS常用Shell命令的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: JDK源码解析之Java.util.Co
- 下一篇: oracle备份脚本