hadoop命令總結

2021-09-26 04:47:07 字數 779 閱讀 4280

1、centos7 命令大全:

與centos其他版本不同的地方:

2、關閉nodemanager 、resourcemanager和historymanager

sbin/yarn-daemon.sh stop resourcemanager

sbin/yarn-daemon.sh stop nodemanager

sbin/mr-jobhistory-daemon.sh stop historyserver

3、啟動nodemanager 、resourcemanager和historymanager

sbin/yarn-daemon.sh start resourcemanager

sbin/yarn-daemon.sh start nodemanager

sbin/mr-jobhistory-daemon.sh start historyserver

4、啟動hdfs集群

(a)格式化namenode(第一次啟動時格式化,以後就不要總格式化)

bin/hdfs namenode -format
(b)啟動/停止namenode

sbin/hadoop-daemon.sh start/stop namenode
(c)啟動/停止datanode

sbin/hadoop-daemon.sh start/stop datanode

hadoop命令總結

1 檢視指定目錄下內容 hadoop dfs ls 檔案目錄 eg hadoop dfs ls user wangkai.pt 2 開啟某個已存在檔案 hadoop dfs cat file path eg hadoop dfs cat user wangkai.pt data.txt 3 將本地檔...

Hadoop常用命令總結

檢視幫助 hadoop fs help 列出檔案系統由哪些塊構成 hadoop fsck files blocks 檢視磁碟 hadoop fs df h 建立目錄 hadoop fs mkdir user 列出根目錄 hadoop fs ls 列出所有檔案 hadoop fs ls 遞迴檢視根目錄...

hadoop學習總結

1 sbin目錄 存放啟動或停止hadoop相關服務的指令碼 2 bin目錄 存放對hadoop相關服務 hdfs,yarn 進行操作的指令碼 3 etc目錄 hadoop的配置檔案目錄,存放hadoop的配置檔案 4 share目錄 存放hadoop的依賴jar包和文件,文件可以被刪除掉 5 li...