Hadoop重啟失敗問題集合

2021-10-12 01:53:56 字數 660 閱讀 9655

hadoop namenode 啟動需要載入fsimge檔案和edit-log檔案。

![報錯資訊引用](
看起來是fsimage中的節點數目過多,導致的gc overhead超過限制。fsimage是namenode維護的重要檔案之一,它包含了整個hdfs檔案系統的所有目錄資訊和檔案資訊。對於檔案來說包含了資料塊描述資訊、修改時間、訪問時間等;對於目錄來說,包含了修改時間、訪問許可權控制資訊等。

需要用以下命令檢視fsimage檔案占用的記憶體大小:

./hdfs oiv -p xml -printtoscreen -i $ -o /tmp/a

cat /tmp/a | egrep 「|」 | wc -l | awk 『』

解決方案選擇:

1.  將hadoop-env.sh裡的調整記憶體大小

2. 將hadoop-env.sh裡的hadoop_namenode_opts裡加上對於xmx和xms的配置:

mysql 重啟失敗 重啟MySQL服務失敗

在mysql安裝完成之後,使用命令 net start mysql 出現錯誤 開啟mysql data 目錄下的出錯檔案 2020 08 15t03 27 08.908407z 0 system my 010116 server d program files x86 mysql 8.0.16 wi...

重啟網絡卡失敗

命令列中輸入網絡卡重啟命令ifdown eth0 ifup eth0出現如下錯誤 job for network.service failed because the control process exited with error code.see systemctl status networ...

rancher重啟失敗修復

rancher 集群整體重啟後,集群啟動失敗 ranch容器保錯 clustercontroller c xxam user controllers controller failed with failed to start user controllers for cluster c xxam ...