昨天遇到了乙個很鬱悶的問題，在虛擬機器搭建hadoop集群後沒有停止服務就關閉了虛擬機器。導致hdfs失效，namenode和datanode丟失，於是找到了解決的辦法。
就是簡單的乙個字，刪！
刪除掉損壞的 namenode資料和datanode資料，具體過程如下
刪除所有節點下 ~/dfs/data 資料夾下的所有內容
刪除所有節點下 ~/dfs/name 資料夾下的所有內容
刪除所有節點下 ~/tmp 資料夾下的所有內容
重新初始化 namenode: 在namenode節點上hadoop安裝資料夾下執行 ./bin/hdfs namenode -format
重啟dfs和yarn服務 :在namenode節點上hadoop安裝資料夾下執行 ./sbin/start-dfs.sh 然後執行 ./sbin/start-yarn.sh
然後就會發現，namenode和datanode又上線了。故障排除
在伺服器中搭建完hadoop集群後一定要注意關閉服務後再關閉電源，以免hadoop集群無法正常啟動
關閉dfs和yarn服務:在namenode節點上hadoop安裝資料夾下執行 ./sbin/stop-dfs.sh 然後執行 ./sbin/stop-yarn.sh
關閉系統
kafka2 5 1集群部署
名稱 版本gcw1 kafka2.5.1 gcw2 kafka2.5.1 gcw3 kafka2.5.1 華為映象 解壓 創件軟連線vi etc profile新增 export path kafka home bin path 使配置檔案生效 source etc profile root gcw...
Hadoop 3 2 2 集群安裝
一 虛擬機器環境準備 系統主機 位址hadoop版本 jdk版本 centos9 hadoop01 10.211.55.4 3.2.2 1.8.0 322 centos9 hadoop02 10.211.55.7 3.2.2 1.8.0 322 centos9 hadoop03 10.211.55....
HADOOP集群搭建 8 集群時間同步
1 檢查是否安裝ntp rpm qa grep ntp 安裝ntp yum install y ntp 安裝成功截圖 2 修改ntp配置檔案 修改3處 restrict 192.168.183.0 mask 255.255.255.0 nomodify notrap server 0.centos....