CDH安裝中可能遇到的問題

2022-08-21 11:57:10 字數 839 閱讀 6490

1.許可權問題

對cloudera manager的各個目錄操作後必須注意許可權的問題

手動對hdfs進行格式後,手動啟動hdfs會自動生成以下三個檔案:需要修改各個目錄的許可權:    

namenode 資料目錄:/dfs/nn

hdfs 檢查點目錄:/dfs/snn

datanode 資料目錄:/data/dfs/dn

2.canary 測試無法為 /tmp/.cloudera_health_monitoring_canary_files 建立父目錄。(canary其他問題,大部分等一會就好了)

需要修改hdfs的根目錄的許可權: hdfs dfs -chmod 777 /

3.修改儲存目錄

需要對datanode的磁碟空間進行新增時直接新增即可,如果是修改儲存的目錄mv進行剪下,然後在cm上面修改成對應的位址即可

4.hdfs nfs gateway 無法啟動、掛載失敗問題:   

關鍵字樣,沒有portmap or rpcbind服務,所以後續工作無法進行: no portmap or rpcbind service

工作執行機制為: hdfs nfs gateway工作需要依附 rpcbind 服務,所以啟動前需要確定rpcbind服務正常開啟。 service rpcbind start 

但是hdfs nfs 服務會與系統自帶的nfs服務衝突,所以在啟動前需要關閉系統自帶的nfs服務。service nfs stop

5.cm安裝好了無法直接通過cm上面的web ui去連線各個服務:

cm上面的web ui去連線各個服務時用的位址是主機名,而windows沒有配置對映,所有無法連線,需要在windows中配置所有節點的對映

CDH環境搭建遇到的問題

永久修改 在 etc sysctl.conf檔案裡新增如下引數 或者 其實 寫入到 etc sysctl.conf就已經永久生效了,如果要讓剛寫入的立即也生效可以執行以下sysctl p 已啟用透明大頁面壓縮,可能會導致重大效能問題。請執行 echo never sys kernel mm tran...

linux 安裝oracle可能遇到的問題

1.bash sqlplus command not found 解決方法 oracle dg1 sqlplus nolog bash sqlplus command not found oracle dg1 ln s oracle home bin sqlplus usr bin ln creat...

安裝virtualenv及可能遇到的問題

安裝virtualenv及擴充套件包 sudo pip3 install virtualenv 安裝完虛擬環境後,提示找不到mkvirtualenv命令,須配置環境變數 1 建立目錄用來存放虛擬環境 mkdir home virtualenvs 2 開啟 bashrc檔案,並新增如下 export ...