Storm集群搭建(三颱機器)

2021-08-20 23:36:45 字數 1594 閱讀 2989

1、jdk1.8.0_65

2、zookeeper-3.4.10

3、apache-storm-1.1.0

本文準備了三颱機器,來搭建zookeeper集群和storm集群。主機名分別是

storm1、storm2、storm3,對應ip分別為: 192.168.10.100 | 192.168.10.101 | 192.168.10.102

(提示:三颱機器之間已經配置免密碼登陸、修改相應的主機名稱、修改相應集群中主機名稱與ip的對映關係表、永久關閉各個機器的防火牆)

略……

(安裝參考網上: )

略……

(具體安裝方法將網上: )

2.1.1啟動和停止

1.檢視狀態

zkserver.sh status
檢視zookeeper服務的狀態,你會看到哪個節點是leader節點,哪個節點是follower節點,並且只有乙個zookeeper節點

2.啟動

zkserver.sh start

啟動zookeeper服務,正確啟動只有,使用jps命令會看到quorumpeermain,如果該程序啟動說明zookeeper服務成功的啟動

3.停止

zkserver.sh stop
安裝參考:

2.解壓到指定目錄並配置環境變數

$ tar -xvzf apache-storm

-1.1

.0.tar.gz

$ mv apache-storm

-1.1

.0 /home/

$ cd /home/apache-storm

-1.1

.0

3.接下來需要修改配置檔案storm.yaml,執行vim conf/storm.yaml開啟檔案:

(1)storm.zookeeper.servers設定zookeeper集群的伺服器有哪些;

(2).supervisor.slots.ports:設定一台伺服器上有多少個槽位,即多少個work程序;

(3).nimbus.seeds指定numbus主節點和備用節點

(4)設定任務使用的最小和最大的記憶體大小和堆空間大小:

4.配置storm的環境變數

vim /etc/profile  #開啟編譯檔案

source /etc/profile #使得環境變數立即生效

(3)檢視storm是否配置成功

命令:storm version

當出現storm1.1.0配置環境變數成功。

5.使用scp命令將apache-storm-1.1.0從100上分發到其他集群的機器上面;

scp –r /home/apache-storm-1.1.0  [email protected]/home/

scp –r /home/apache-storm-1.1.0 [email protected]/home/

並配置相應的環境變數。

storm集群搭建

在3臺虛擬機器上部署strom集群,主機名分別為 mini1 mini2 mini3 解壓 修改配置檔案 啟動集群 wgettar zxvf apache storm 0.9.5.tar.gz c export servers cd export servers ln s apache storm ...

Storm集群搭建

zookeeper集群搭建完畢 storm環境變數 export path path bin bin sbin bin bin bin bin 修改conf的目錄下的storm.yaml vi storm.yaml 儲存退出之後,scp到其他兩台server上 啟動storm集群 首先啟動nimbu...

Storm 集群搭建

1 集群規劃 hadoop senior01.itguigu.com hadoop senior02.itguigu.com hadoop senior03.itguigu.com zkzk zkstorm storm storm 3 虛擬機器準備 1 準備3臺虛擬機器 2 配置ip位址 3 配置主...