Hadoop 之shell常用命令

2021-09-26 09:29:24 字數 666 閱讀 4104

hdfs dfs -ls /

遞迴檢視目錄下的所有檔案包括子資料夾裡面的檔案

hdfs dfs -ls -r /

hdfs dfs -mkdir /test

級聯建立資料夾

hdfs dfs -mkdir -p /test/abc/def

hdfs dfs -put ./a.txt /hello

從本地剪下檔案到hdfs上

hdfs dfs -movefromlocal a.txt /

hdfs dfs -get /hello/test.txt ./

hdfs dfs -getmerge /hello/a.txt /hello/b.txt ./me.txt

hdfs dfs -cat /hello/test2.txt

從hdfs乙個路徑拷貝到hdfs另乙個路徑

hdfs dfs -cp /hello/test.txt /hello/abc

在hdfs目錄中移動檔案

hdfs dfs -mv /hello/test.txt /hello/abc

刪除檔案或資料夾

hdfs dfs -rm /hello/test.txt

強制刪除

hdfs dfs -rm -rf /hello/abc

參考:hadoop集群shell常用命令

hadoop的shell常用命令

hadoop指令碼命令開始位置有兩種寫法 hadoop fs 和hdfs dfs,其中hdfs dfs為hadoop1中命令,在hadoop2和hadoop3中也可以用,hadoop fs為hadoop2和hadoop3中命令。以下文章中的中括號 表示為可選項,可加可不帶,中括號中字母或單詞有特殊功...

Hadoop之HDFS Shell的常用命令的使用

操作命令是以 hdfs dfs 開頭的命令。通過這些命令,使用者可以完成hdfs檔案的複製 刪除和查詢的操作。shell命令一般格式如下 hdfs dfs命令 hdfs dfs mkdir p hdfs dfs mkdir mydir 新建資料夾 mydir hdfs dfs mkdir p you...

Hadoop二 Hadoop常用命令

以hadoop執行hadoop自帶的wordcount為例,hadoop指令碼位於 home hadoop hadoop 2.5.2 bin hadoop,需要說明的是,這些命令的使用必須在hadoop已經執行的情況下才能執行 列出hdfs檔案系統的第一級檔案和第一級目錄,如 hadoop hado...