hadoop HA集群搭建步驟及配置檔案的修改

scp -r hadoop-2.6.0-cdh5.14.0 node03:/$pwd

#注意：兩個namenode之間要配置ssh免密碼登陸  ssh遠端補刀時候需要

#在node02上生產一對鑰匙
ssh-keygen 
#將公鑰拷貝到node01
ssh-coyp-id node01

bin/zkserver.sh start

#檢視狀態：乙個leader，兩個follower
bin/zkserver.sh status

hadoop-daemon.sh start journalnode

#執行jps命令檢驗，node01、node02、node03上多了journalnode程序

hdfs namenode -format

#格式化後會在根據core-site.xml中的hadoop.tmp.dir配置的目錄下生成個hdfs初始化檔案，
把hadoop.tmp.dir配置的目錄下所有檔案拷貝到另一台namenode節點所在的機器
scp -r hahadoopdatas node02:/$pwd
##也可以這樣，建議hdfs namenode -bootstrapstandby

hdfs zkfc -formatzk

start-dfs.sh

zookeeper集群搭建步驟

2 解壓tar zxvf zookeeper 3.4.9.tar.gz 3 在zk安裝目錄下，新建目錄zkdata和zkdatalog 4 在conf目錄下拷貝zoo sample.cfg為zoo.cfg，修改 datadir home user test zookeeper zkdata 快照日誌...

kafka集群搭建步驟

1 搭建軟體環境 1 linux一台或多台，大於等於2 2 已經搭建好的zookeeper集群 2 解壓tar zxvf kafka 2.10 0.10.1.1.tgz 3 在kafka安裝目錄下，新建目錄kafkalogs 4 在config目錄下修改配置檔案server.properties，b...

redis集群搭建詳細步驟

第一步 建立redis安裝目錄 home cattsoft software 解壓 tar zxvf redis 3.0.6.tar.gz ln s redis 3.0.6 redis 目錄如下 第二步 使用yum安裝 依賴軟體 1 依賴於ruby環境，首先安裝ruby。執行 yum install...