hdfs常用shell命令

2021-08-14 09:28:18 字數 1121 閱讀 5098

1. sh hadoop fs -put /soft/offlineprocess/custom.xml /user/oozie/ 將

/soft/offlineprocess/下的custom.xml

檔案,拷貝到hdfs的

/user/oozie/目錄下。

2. sh hadoop -rmr /user/oozie/lib/

刪除hdfs目錄/user/oozie/lib/下的所有內容

3.sh hadoop fs -rm /user/oozie/offlineprocess.jar

刪除hdfs目錄

/user/oozie/目錄下的offlineprocess.jar

4.hdfs dfs -ls /user/oozie

查詢hdfs目錄

/user/oozie下的所有檔案

7. centos中增加快捷鍵,編輯.bash_profile即可

alias cdh="cd /soft/offlineprocess/" 輸入cdh,即可進入目錄/soft/offlineprocess/

alias tailinfo="tail -100f /data/logs/offlineprocess/info.log" 輸入tailinfo,即可檢視/data/logs/offlineprocess/目錄下的info.log日誌

alias reputjar="hdfs dfs -rm /user/oozie/offlineprocess.jar;hdfs dfs -put /soft/offlineprocess/offlineprocess.jar /user/oozie/offlineprocess.jar" 輸入reputjar,即可先刪除hdfs中/user/oozie/目錄下的offlineprocess.jar,然後重新上傳/soft/offlineprocess/目錄下的offlineprocess.jar 到目錄/user/oozie/

alias lls="hdfs dfs -ls $1" 輸入lls /user/oozie/lib,即可檢視/user/oozie/lib下的所有檔案

alias llsjar="hdfs dfs -ls /user/oozie" 輸入llsjar,即可檢視/user/oozie下的所有檔案

HDFS 常用shell命令

fs file system shell 命令格式 bin hadoop fs cmd 當使用hdfs distributed file system 等價使用如下命令格式 bin hdfs dfs cmd localsrc dst 可同時上傳多個檔案到hdfs裡面 2hdfs dfs caturi...

hdfs常用shell命令

基於ubuntu下hadoop偽分布式操作指令。將hdfs檔案系統下所有檔案以級聯的形式顯示出來。hdfs dfs ls r 一次性建立乙個 資料夾。hdfs dfs mkdir p folder1 folder2 folder3在folder1 folder2 folder3目錄下建立乙個temp...

HDFS常用shell命令

1 檢視所有命令 hdfs dfs 2 檢視某目錄下檔案列表 hdfs dfs ls tmp hdfs dfs cat tmp index.html 4 在hdfs 中建立job 目錄 hdfs dfs mkdir tmp info 遞迴建立目錄 hdfs dfs mkdir p tmp work ...