日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

HDFS常用Shell命令

發布時間:2025/3/8 编程问答 18 豆豆
生活随笔 收集整理的這篇文章主要介紹了 HDFS常用Shell命令 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

1、-ls: 顯示目錄信息

hadoop fs -ls /

2、-mkdir:在HDFS上創建目錄

hadoop fs -mkdir -p /demo/test

3、-moveFromLocal:從本地剪切粘貼到HDFS

hadoop fs -moveFromLocal a.txt /demo/test/a.txt

4、-appendToFile:追加一個文件到已經存在的文件末尾

hadoop fs -appendToFile b.txt /demo/test/b.txt

5、-cat:顯示文件內容

hadoop fs -cat /demo/test/b.txt

6、-chgrp 、-chmod、-chown:Linux文件系統中的用法一樣,修改文件所屬權限

hadoop fs -chmod 777 /demo/test/b.txt

7、copyFromLocal:從本地文件系統中拷貝文件到HDFS路徑去

hadoop fs -copyFromLocal b.txt /demo/test/b.txt

8、-copyToLocal:從HDFS拷貝到本地

hadoop fs -copyToLocal /demo/test/b.txt /address

9、從HDFS的一個路徑拷貝到HDFS的另一個路徑

hadoop fs -cp /demo/test/b.txt /demo/test2/b.txt

10、-mv:在HDFS目錄中移動文件

hadoop fs -mv /demo/test/b.txt /demo/test2/b.txt

11、-get:等同于copyToLocal,就是從HDFS下載文件到本地

hadoop fs -get /demo/test/b.txt /address

12、-getmerge:合并下載多個文件,比如HDFS的目錄 /user/atguigu/test下有多個文件:log.1, log.2,log.3,…

hadoop fs -getmerge /user/test/* /address

13、-put:等同于copyFromLocal

hadoop fs -put ./zaiyiqi.txt /user/atguigu/test/

14、-tail:顯示一個文件的末尾

hadoop fs -tail /demo/test2/b.txt

15、-rm:刪除文件或文件夾

hadoop fs -rm /demo/test2/b.txt

16、-rmdir:刪除空目錄

hadoop fs -mkdir /test

17、-du統計文件夾的大小信息

hadoop fs -du -s -h /user/atguigu/test 2.7 K /user/atguigu/testhadoop fs -du -h /user/atguigu/test 1.3 K /user/atguigu/test/README.txt 15 /user/atguigu/test/jinlian.txt 1.4 K /user/atguigu/test/zaiyiqi.txt

18、-setrep:設置HDFS中文件的副本數量

hadoop fs -setrep 10 /demo/test2/b.txt

這里設置的副本數只是記錄在NameNode的元數據中,是否真的會有這么多副本,還得看DataNode的數量。副本數達到相應數量的前提是設備數達到相應的數量。

19、-help:輸出這個命令參數

hadoop fs -help rm

總結

以上是生活随笔為你收集整理的HDFS常用Shell命令的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。