hdfs的組成及作用

2021-09-29 16:27:33 字數 514 閱讀 1486

client客戶端

namenode

datanode

secondarynamenode

(1)檔案切分。檔案上傳hdfs的時候,clien將檔案切分成一 個個的block,然後進行上傳;

(2)與namenode互動,獲取檔案的位置資訊;

3)與datanode互動,讀取或者寫入資料:

(4) client提供一些命令來管理hdfs, 比如namenode格式化;

(5) client可以通過一些命今來訪問hdfs,比如對hdfs增刪查改操作;

(1)管理hdfs的命名空間;

(2)配置副本策略;

(3)管理資料塊(block)對映資訊;

(4)處理客戶端讀寫請求。

(1)儲存實際的資料塊;

(2)執行資料塊的讀寫操作。

(1)輔助namenode,分擔其工作,比如定期合推fsaimag和edit,並推送給namenode ;

(2)在緊急情況下,可輔助恢復namenode。

HDFS組成部分及作用

一 組成部分 1.client客戶端 2.namenode主節點 3.secondarynamenode 理解為 namenode 的備份,屬於冷備份 二 各部分的作用 client client 發布命令,集群操作,監聽 獲取集群的執行狀態 分塊 邏輯分塊 之規定的最大沒有規定最小即使有兩個不滿6...

HDFS組成架構概述

1 namenode 它是乙個主管,管理者 1.管理hdfs的命名空間 2.配置副本策略 3.管理資料塊block對映資訊 4.處理客戶端讀寫請求 2 datanode 執行實際的操作,執行者 1.儲存實際的資料塊 2.執行資料塊的讀 寫操作 3 client 客戶端 1.檔案切分,檔案上傳hdfs...

什麼是OBD及組成和作用 工作原理

1 obd通訊協議 2 obd相關技術標準 3 車聯網 obd應用 4 obd的歷史和未來 5 obd簡述 6 車載診斷系統 obd 12月1日起,沒有加裝obd的車輛禁止在北京銷售。08年7月,全國將實施車輛加裝obd。這是一次汽車技術公升級的過程,看似簡單的obd問題,實則相當複雜。obd,不僅...