kafka2 5 1集群部署

名稱

版本gcw1

kafka2.5.1

gcw2

kafka2.5.1

gcw3

kafka2.5.1

華為映象

## 解壓

## 創件軟連線

export path=$kafka_home/bin:$path

## 使配置檔案生效

source /etc/profile

主要有以下幾項需要配置，其他預設即可

broker.id=0

listeners=plaintext://gcw1:9092
log.dirs=/data/kafka/kafka-logs
zookeeper.connect=gcw1:2181,gcw2:2181,gcw3:2181/kafk

scp -r kafka_2.13-2.5.1/ gcw2:`pwd`

scp -r kafka_2.13-2.5.1/ gcw3:`pwd`

參照上述建立軟連線，配置環境變數，修改配置

broker.id=1

listeners=plaintext://gcw2:9092

broker.id=2

listeners=plaintext://gcw3:9092

## 配置的主機都需要啟動

zkserver.sh start

初次啟動如果出錯的話，可以不加 -daemon，可以控制台列印日誌，便於檢視，排查完畢可以加 -daemon後台啟動

執行命令不報錯即可

[root@gcw1 kafka]# kafka-topics.sh --bootstrap-server gcw3:9092 --list

__consumer_offsets

kafka 2 11 0 10 2 0集群安裝

集群環境 spark1 ip 192.168.6.137 spark2 ip 192.168.6.138 spark3 ip 192.168.6.139 cd usr local wget kafka 0.10.2.0 kafka 2.11 0.10.2.0.tgz tar xzf kafka 2....

kafka 2 11 0 11 0 1集群搭建

本文搭建乙個三節點的kafka集群。該集群有三個zookeeper 三個kafka broker。解壓kafka安裝包，獲得如下目錄 unzip kafka 2.11 0.11.0.1.zip kafka 2.11 0.11.0.1 kafka目錄結構 cd kafka 2.11 0.11.0.1 ...

kafka2 3集群搭建

環境 3臺centos7.4 3臺zookeeper3.4.14 wget 解壓 tar zxvf kafka 2.11 2.3.0.tgz 進入kafka目錄，修改config server.properties，找到zookeeper.connect，修改zk集群的連線位址為 zookeeper...