常用hadoop命令

2021-06-06 13:45:32 字數 554 閱讀 2181

使用hadoopdfs +shell命令

使用方法:hadoop fs -copyfromlocal uri

除了限定源路徑是乙個本地檔案外,和put命令相似。

使用方法:hadoop fs -copytolocal [-ignorecrc] [-crc] uri

除了限定目標路徑是乙個本地檔案外,和get命令類似。

其中uri是dfs中全域性路徑;是本地檔案系統中的絕對路徑

檢視目錄,列表資訊: hadoop dfs -ls

建立目錄test:hadoop dfs -mkdir test

刪除目錄test: hadoop dfs  -rmr  test

上傳檔案到hdfs目錄: hadoop dfs -put *.txt  test

檢視檔案: hadoop dfs -cat filename

檢視任務列表: hadoop job -list

停止某個任務: hadoop job -kill jobid

詳細命令列表和用法請參考:

hadoop常用操作命令

1 檢視指定目錄下內容 hadoop dfs ls 檔案目錄 eg hadoop dfs ls user wangkai.pt 2 開啟某個已存在檔案 hadoop dfs cat file path eg hadoop dfs cat user wangkai.pt data.txt 3 將本地檔...

hadoop常用操作命令

1.列出根目錄下所有的目錄或檔案 hadoop dfs ls 2.列出 user目錄下的所有目錄和檔案 hadoop dfs ls user 3.列出 user目錄及其子目錄下的所有檔案 謹慎使用 hadoop dfs ls r user 4.建立 soft目錄 hadoop dfs mkdir s...

Hadoop二 Hadoop常用命令

以hadoop執行hadoop自帶的wordcount為例,hadoop指令碼位於 home hadoop hadoop 2.5.2 bin hadoop,需要說明的是,這些命令的使用必須在hadoop已經執行的情況下才能執行 列出hdfs檔案系統的第一級檔案和第一級目錄,如 hadoop hado...