hadoop常用命令

2021-08-21 18:14:07 字數 1047 閱讀 8391

hadoop命令

所有的hadoop命令都通過bin/hadoop指令碼呼叫。在沒有任何引數的情況下,執行hadoop指令碼將列印該命令描述。

hdfs

呼叫檔案系統(fs)shell命令應使用 bin/hadoop fs 或新版的bin/hdfs dfs 的形式。

所有的的fs shell命令使用uri路徑作為引數。uri格式是scheme://authority/path。對hdfs檔案系統,scheme是hdfs,對本地檔案系統,scheme是file。其中scheme和authority引數都是可選的,如果未加指定,就會使用配置中指定的預設scheme。乙個hdfs檔案或目錄比如/parent/child可以表示成hdfs://namenode:namenodeport/parent/child

hadoop fs -movefromlocal --put

copytolocal --get

hadoop fs -cat uri [uri …]

hadoop fs -lsr hadoop fs -mv uri [uri …] hadoop fs -put ...

hadoop fs -rmr uri [uri …]

hadoop fs -tail [-f] uri

hadoop fs -test -[ezd] uri //可看壓縮

hadoop fs -mkdir hadoop fs -chgrp [-r] group uri [uri …]

yarn命令詳解

yarn命令是呼叫bin/yarn指令碼檔案,如果執行yarn指令碼沒有帶任何引數,則會列印yarn所有命令的描述。

yarn jar [mainclass] args...

執行jar檔案,使用者可以將寫好的yarn**打包成jar檔案

yarn node -list -all

yarn node -list -states running //檢視結點

yarn queue -status //檢視佇列

hadoop 常用命令

啟動hadoop 進入hadoop home目錄。執行sh bin start all.sh 或者是在hadoop 的目錄下能看到他的bin目錄 執行 bin start all.sh 關閉hadoop 進入hadoop home目錄。執行sh bin stop all.sh 同上。1 檢視指定目錄...

hadoop常用命令

1 檢視指定目錄下內容 hadoop dfs ls 檔案目錄 eg hadoop dfs ls user wangkai.pt 2 開啟某個已存在檔案 hadoop dfs cat file path eg hadoop dfs cat user wangkai.pt data.txt 3 將本地檔...

hadoop常用命令

1 檢視指定目錄下內容 hadoop dfs ls 檔案目錄 eg hadoop dfs ls user wangkai.pt 2 開啟某個已存在檔案 hadoop dfs cat file path eg hadoop dfs cat user wangkai.pt data.txt 3 將本地檔...