HDFS常用操作

2021-08-03 11:48:23 字數 821 閱讀 7881

hdfs dfs -ls 
hdfs dfs -put

file> file>

example:

hdfs dfs -put test1 /input/test

把當前本地目錄下的test1檔案上傳到hdfs /input目錄下,並命名為test

hdfs dfs -get

file> file

or dir>

local file不能和 hdfs file名字不能相同,否則會提示檔案已存在,沒有重名的檔案會複製到本地

hdfs dfs -get ...

拷貝多個檔案或目錄到本地時,本地要為資料夾路徑

hdfs dfs -rm

hdfs dfs -rm

-r

hdfs dfs -cat file>
hdfs dfs -mkdir path>
只能一級一級的建目錄,父目錄不存在的話使用這個命令會報錯

hdfs dfs -mkdir

-p

所建立的目錄如果父目錄不存在就建立該父目錄

hdfs dfs -cp  file>

file>

hdfs dfs -mv file>

file>

當兩個檔案的父路徑相同時, 作用相當於檔案重新命名

Hdfs常用操作

本文記錄一下hdfs的一些常用指令 如果我們想要上傳檔案到hdfs,可以執行如下指令 hadoop dfs put 本地檔案的路徑 hdfs的路徑例如 hadoop dfs put home spark hadoop datasource inte ce access log 20160829 da...

HDFS常用操作

命令格式 hdfs dfs mkdir 舉例 在hdfs上已有資料夾data下面簡歷乙個新的資料夾zuo hdfs dfs mkdir data zuo 命令格式 hdfs dfs ls 列出檔案路徑下的檔案 hdfs dfs ls a 列出檔案路徑下所有的檔案,包括隱藏檔案 hdfs dfs ls...

HDFS常用操作

上傳檔案 hdfs dfs put src dest 從本地的src位置上傳到hdfs的dest位置,src可以有多個,空格隔開 複製檔案 hdfs dfs copyfromlocal src dest 複製檔案,從src位置複製到dest 位置,src可以有多個,空格隔開 移動檔案 剪下 hdfs...