kafka安裝配置

2021-08-28 22:52:07 字數 964 閱讀 1962

########1 部署規劃############

作業系統:centos 7.2

kafka版本:kafka_2.10-0.8.2.1

安裝路徑: /opt/kafka_2.10-0.8.2.1

節點:192.168.20.100~105

########2 部署過程############ 

2.2 解壓

$ tar  -zxvf  kafka_2.10-0.8.2.1.tgz

2.3 修改配置檔案server.propertperties

broker.id=0                            //每個broker對應乙個id

log.dirs=/mnt/volume_m/logs/kafka       //kafka日誌目錄

zookeeper.connect=zookeeper1:2181,zookeeper2:2181,zookeeper3:2181,zookeeper4:2181,zookeeper5:2181/kafka      

//在zookeeper下的目錄

2.4 配置環境變數

在/etc/profile.d下建立下建立kafka.sh,寫入:

export kafka_home=/opt/kafka

export path=$kafka_home/bin:$path

配置完成後使用source使環境變數生效。

########3 開啟kafka#############

kafka服務依賴zookeeper服務,所以開啟kafka需要zookeeper服務已啟動,並在zookeeper下建好目錄,目錄對應之前server.propertperties中的zookeeper.connect配置

在每個節點執行:

$ kafka-server-start.sh $kafka_home/config/server.propertperties &

Kafka安裝配置

kafka執行依賴 zookeeper,如未安裝zookeeper請參考 zookeeper安裝使用 kafka版本問題 這又是一大坑 如果你的storm安裝的是1.0.x系列或更低的版本,建議你安裝0.8.x.x版本的kafka。如果你的storm安裝的是1.1.x系列或更高的版本,建議你安裝0....

kafka安裝配置

一.zookeeper部署 tar xvf zookeeper 3.4.6.tar.gz mv zookeeper 3.4.6 zookeeper chown r root root zookeeper 2.修改配置 cd zookeeper conf cp zoo sample.cfg zoo.c...

kafka安裝配置

2 安裝成功後,啟動命令 先啟動zookeeper bin zookeeper server start.sh config zookeeper.properties 再啟動kafka bin kafka server start.sh config server.properties 3 測試ka...