HDFS啟動過程 安全模式

2021-10-10 10:28:42 字數 403 閱讀 2659

可以通過startup progress檢視hdfs的啟動過程:

1載入檔案的元資訊fsimage

2載入操作日誌檔案edits

3操作檢查點

4自動進入安全模式,檢查資料塊的副本率是否滿足要求。當滿足要求後,退出安全模式【安全模式safemode是hdfs所處的一種特殊狀態。處於這種狀態時,hdfs只接受讀資料請求,不能對檔案進行寫、刪除等操作。在namenode主節點啟動時,hdfs首先進入安全模式,datanode回向namenode上傳它們資料塊列表,讓namenode得到資料塊的位置資訊,並對每個檔案對應的資料塊副本進行統計。當最小副本條件滿足時,hdfs自動離開安全模式】。

HDFS集群啟動過程詳解

hdfs的啟動過程和關閉過程都經過指令碼進行了封裝,只需要執行start all.sh和stop all.sh就可以。操作較簡單。下面針對啟動階段的原理和詳細過程進行說明,對關閉過程目前還沒有調研,所以暫缺。hdfs的啟動分三步驟 下面一一描述。1.初始化過程 獲取一些必要的引數值,初始化fsima...

HDFS集群啟動過程詳解

hdfs的啟動過程和關閉過程都經過指令碼進行了封裝,只需要執行start all.sh和stop all.sh就可以。操作較簡單。下面針對啟動階段的原理和詳細過程進行說明,對關閉過程目前還沒有調研,所以暫缺。hdfs的啟動分三步驟 下面一一描述。1.初始化過程 獲取一些必要的引數值,初始化fsima...

HDFS中NameNode的啟動過程

namenode儲存檔案系統元資料映象,namenode在記憶體及磁碟上分別存在乙份元資料映象檔案,記憶體中元資料映象保證了hdfs檔案系統檔案訪問效率,磁碟上的元資料映象保證了hdfs檔案系統的安全性。namenode在磁碟上的檔案組成 fsimage檔案 儲存檔案系統至上次checkpoint為...