YARN文件概述

2021-07-09 23:38:53 字數 1505 閱讀 7845

1.yarn 

結構文件簡介:

yarn的基本思想是拆分資源管理的功能,作業排程/監控到單獨的守護程序

英文**:

2.hadoop: capacity 排程

文件簡介

本文件介紹了capacityscheduler,hadoop可插拔scheduler 允許多租戶安全共享大的集群,他們的應用在分配的能力約束下及時分配資源。

英文**:

3.hadoop: fair 排程

文件簡介

這個文件描述了fairscheduler,hadoop可插拔scheduler允許yarn應用fairly共享資源在大集群。

英文**:

###########################

上面兩個文件詳細介紹了hadoop排程方式

4.resourcemanger 重啟

文件簡介

resourcemanager 是**權威,管理資源和排程應用執行yarn 。因此,潛在單點故障在yarn 集群。本文給出了概述,重啟resourcemanager,乙個功能提高resourcemanager 保持執行,對於終端使用者使resourcemanager宕機時間不可見。

英文**

5.resourcemanager 高可用

文件簡介

本指南提供了yarn的resourcemanager高可用性概述,和詳細描述了如何配置和使用這個功能。resourcemanager(rm)負責跟蹤資源集群,和排程應用(等mapreduce jobs)。hadoop 2.4之前,yarn 集群有單點故障。這個高可用功能新增冗餘在乙個active/standby resourcemanager 隊的形式,移除這個,否則就是單點故障。

結構:

英文**

6.yarn 節點labels

文件簡介

節點標籤是一種具有相似特性的組節點的方式,應用程式可以指定執行的地方。

英文**:

7.web 應用**

文件簡介

web應用**是yarn一部分。預設它執行作為 resource manager(rm)一部分,但是可以被配置為執行單機模式

英文網路:

8.yarn timeline server

文件簡介

儲存和檢索當前應用和歷史資訊以通用的方式在yarn處理,通過 timeline server

英文**

9.hadoop: writing yarn 應用

文件簡介

本文件描述了乙個高層次的方法來實現yarn的新應用。

英文**

10.yarn 命令

文件簡介

yarn 命令被bin/yarn指令碼呼叫。執行yarn 沒有任何指令碼,列印所有命令描述

英文**:

mapreduce文件概述

1.mapreduce 教程 文件簡介 這個文件描述所有使用者認識hadoop mapreduce 框架和服務 英文 2.mapreduce命令指南 文件作用 所有的mapreduce命令通過 bin mapred指令碼呼叫。執行mapred指令碼沒有任何引數列印所有命令的描述。英文 3.遷移從ha...

Go 文件 概述

go 官網 被牆 go 的安裝比較簡單,暫時沒有翻譯計畫。go 有三個部分的互動介紹。第一部分介紹基本的語法和資料結構,第二個討論方法和介面,第三部分引入了 go 的併發原語。每個部分都以幾個練習接受,以便你可以練習所學知識。以在通過下面的命令在本地安裝 go get golang.org x to...

產品文件概述

1.為什麼需要產品文件?1.1.解決利益相關者的問題 1.2.更多分散的原因 2.什麼是產品文件?2.1.產品文件應當包含什麼?2.2.什麼是好的產品文件?2.3.常見的文件 3.產品文件的成型過程?自己 思考 發散 規整 未來的自己 回溯 覆盤 學習 別人 設計 開發 我要做什麼 我為什麼要做這個...