Storm集群安裝與部署

2021-09-07 16:43:08 字數 1817 閱讀 6368

1、三颱虛擬機器

192.168.1.128  nimbus

192.168.1.131  supervisor

192.168.1.132  supervisor

2、jdk1.8

3、zookeeper3.4.10

4、storm-1.1.1

1、配置storm(ps:三颱機器的配置都是這樣的)

storm.zookeeper.servers:

- "192.168.1.128

"nimbus.seeds: ["

192.168.1.128"]

storm.local.dir: "

/usr/local/data/storm

"supervisor.slots.ports:

- 6700

- 6701

- 6702

storm.health.check.dir: "

healthchecks

"storm.health.check.timeout.ms: 5000

2、啟動

到這裡,可以看到集群已經啟動成功了。接下來,將wordcount程式在集群中執行,只需做如下改動。

mvn clean package打成jar包上傳,並執行

Storm 單機 集群安裝部署

官方文件 注意 storm.yaml 每個屬性名前和冒號後都要有個空格,不然會解析錯誤 zookeeper 集群位址 storm.zookeeper.servers 127.0.0.1 nimbus.seeds 127.0.0.1 storm.local.dir users qiaojialin d...

Storm集群部署

storm集群部署 1 所有的集群上都要配置hosts vi etc hosts 192.168.33.201 storm1 hadoop1 zk1 192.168.33.202 storm2 hadoop2 zk2 192.168.33.203 storm3 hadoop3 zk3 2 集群部署的...

Storm集群部署

storm是乙個分布式實時計算系統,storm對於實時計算的意義就相當於hadoop對於批量計算的意義。對於實時性較高的系統storm是不錯的選擇。hadoop提供了map,reduce原語,使批處理程式變得非常地簡單和優美。同樣,storm也為實時計算提供了一些簡單優美的原語。涉及的術語說明 ni...