CDH 5 公升級操作

2021-08-02 11:21:46 字數 1084 閱讀 2072

現在大資料一直在使用cdh來作為基礎平台。常會面臨公升級版本,操作中也經常出現各種各樣的問題。

這裡就整理乙個操作步驟指引。

切記,自建yum源的目錄結構一定要和官方**中的目錄結構一致。

service cloudera-scm

-agent stop

service cloudera-scm

-server stop

service cloudera-scm

-server

-db stop

(如果使用的是postgresql資料庫)

配置cm server 的 yum原始檔

/etc/yum.repos.d/cloudera-manager.repo

# [cloudera-manager]

name = cloudera manager, version 5.11.0

baseurl =

gpgkey = rpm-gpg-key-cloudera

gpgcheck = 1

在cm server伺服器上更新cloudera-manager-server 和 cloudera-manager-agnet

yum upgrade 'cloudera-*'
更新成功後,啟動cm server伺服器上的 server server-db agent 服務

service cloudera-scm

-server

-db start

service cloudera-scm

-server start

service cloudera-scm

-agent start

這個時候cm ui 介面中可以看到新版本的登陸頁面,登陸進去以後,就會提示各個節點agent的版本與server的版本不一致的頁面,然後根據提示引導,進行各個節點agent的公升級步驟。注意,需要自定義yum安裝源的url,需要填寫到本地自建的yum源url位址。

公升級cdh前,先做好namenode目錄的備份,以防公升級失敗,還有補救的機會,資料不至於丟失。

cdh 差異 CDH5和6的區別

cdh6相對於cdh5是一次各個元件的大版本公升級,要理解大版本更新,這裡先解釋一下hadoop相關元件的版本說明。比如版本號是x.y.z,z代表的一般是maintenance version或patch version,這種版本公升級主要修復bug,不改動api,也不涉及新的功能,y代表的是min...

CDH 5 1公升級到CDH5 2記錄

公升級clouderamanager 公升級cdh 由於沒有嚴格遵循文件要求先停用所有服務再公升級clouderamanager,公升級過程中碰到如下問題 公升級完clouderamanager後,servicemonitor不能啟動。刪除 var lib cloudera service moni...

ApiPost V5 公升級指南

同舊版本相比,apipost v5 以下簡稱v5 重新規劃了底層架構,大大降低了記憶體使用率 並加入了大量新功能,使用者體驗也有了全新的提公升。但是同舊版相比,很多使用方式有所不同,本文重點講解以下使用者公升級後可能遇到的幾個小問題。這是由於同舊版相比,v5採用了非同步與雲端同步的方式。非同步與雲端...