1 背景：公司集群整體搬遷
2 問題：hadoop重啟後，發現乙個非常坑爹的問題。用 hadoop dfsadmin -report 檢視datanode狀態完全正常，但是cloudera manager管理介面上顯示嚴重錯誤，如下圖：
就是說cloudera manager server不能收集到各個agent的監控指標!
重啟了幾次發現無效。。。
3 查問題：檢視 cloudera-scm-agent.log 發現類似資訊： monitordaemon-scheduler __init__ monitor expired ...
就是說agent在建立監控的時候超時。
4 解決問題：排除防火牆問題後，發現是因為內網用了乙個squid**。。mygod!!! 每次請求都會經過這個**。所以當然就連不上了。。尼瑪。
在 /etc/profile 裡面，火速乾掉，退出ssh重進，重啟 agent ，搞定！
CDH 方式安裝 Hadoop 手記
ubuntu 14.04 cdh5 選用最簡單cloudera manager 自動安裝 採用這個教程 所有節點至少需要10g記憶體 必須要有root使用者，root使用者密碼必須相同 每個節點必須可以連線到 支援的linux系統，請見對於ubuntu，支援12.04,14.04，64位 新手問題1...
監控mysql狀態 監控mysql狀態指令碼
監控mysql狀態,發現宕後,自動重啟,每秒檢查一次。check.sh bin bash while true do bin sleep 1 sh mysql status.sh done chengkill bin sh pid kill thread for chenglee if filefo...
cdh 與原生態Hadoop區別
需要認識的幾個問題 1.hadoop有幾個版本？2.cdh有幾種安裝方式？3.cdh在安裝認證方面做了什麼改變？cloudera的cdh和apache的hadoop的區別 目前而言，不收費的hadoop版本主要有三個 均是國外廠商 分別是 apache 最原始的版本，所有發行版均基於這個版本進行改進...