日誌檢視
今天在安裝hadoop時，按照要求修改了檔案，最後執行了
hadoop namenode -format
start-all.sh
執行jps命令
沒有發現預期的5個程序
開始網上查詢原因：最可能的原因
1.主機名不對
2.主機名和配製檔案不一致---這個可以自己仔細確認
最後猜測可能是主機名有特殊符號導致的，我的主機名中包含了下劃線，去掉下劃線，重新修改與主機名相關的配製檔案，重啟一下hadoop，然後jps就看到5個程序了
hadoop2 x安裝（準備工具）
每次換電腦的時候都要把hadoop的環境重新的搭建一遍，每次配置的時間不是很長，但是準備的時間浪費很多，都是一些常用的工具軟體還有對應的外掛程式，映象什麼的。所以這次在部落格上總結一下。算是一種複習，也算是為剛接觸hadoop的同學乙個方便的思路。下面我將分為幾部分來描述搭建hadoop2.x的所有...
Hadoop 2 x 四層架構
一 儲存層 檔案系統hdfs，nosql hbase 二 資源及資料管理層 yarn以及sentry等 三 計算引擎 mapreduce impala spark等 四 基於mapreduce spark等計算引擎的高階封裝及工具 hive pig mahout等 sqoop sql to hado...
Hadoop2 X中的描述
1，hadoop 1.0中hdfs和mapreduce在高可用 擴充套件性等方面存在問題 2，hdfs存在的問題 namenode壓力過大，且記憶體受限，影響系統擴充套件 3，mapreduce存在的問題 jobtracker單點故障 jobtracker訪問壓力大，影響系統擴充套件性 難以支援除m...