kafka內外網監聽配置

2021-10-07 01:43:10 字數 1191 閱讀 9513

簡單的配置listeners,外網伺服器資料推到內網kafka集群中,發現可以生成topic,但是無法寫入資料,

外網伺服器報錯

2020-06-10 14:18:53.307 warn 10702 --- [ad | producer-1] org.apache.kafka.clients.networkclient : [producer clientid=producer-1] error while fetching metadata with correlation id 35 :

kafka,執行消費者腳本報錯

[2020-06-10 14:18:53.307] warn error while fetching metadata with correlation id 1 : (org.apache.kafka.clients.networkclient)

下面步驟是成功配置 !!!內網kafka集群,3節點

外網伺服器資料推到內網kafka集群中

內網伺服器資料推到內網kafka集群中

hostname

內網外網

kafka-0

10.2.0.0

111.34.2.10

kafka-1

10.2.0.1

111.34.2.11

kafka-2

10.2.0.2

111.34.2.12

三個kafka節點,config/server.properties 配置下圖,***

修改/etc/hosts新增如下,三個節點都新增

10.2.0.0  kafka-0

10.2.0.1 kafka-1

10.2.0.2 kafka-2

**連線kafka伺服器的外網ip

修改/etc/hosts新增如下,kafka集群主機名與外網ip的對映

111.34.2.10  kafka-0

111.34.2.11 kafka-1

111.34.2.12 kafka-2

1.重啟外網伺服器

2. 刪除topic,重啟kafka集群

kafka內外網集群配置

linux下配置使用 以第一台為例 先配置好jdk環境 1 解壓kafka 2.10 0.10.1.1 2 修改zookeeper.properties 新增配置 maxclientcnxns 0 ticktime 2000 initlimit 10 synclimit 5 session.time...

雙網絡卡內外網配置

1.去網路配置中刪除外網閘道器,或者選擇 自動獲取ip位址 否則會造成衝突 2.cmd route add 111.0.0.0 mask 255.0.0.0 222.0.0.2 p metric 1 引數含義 111.0.0.0 必填,想訪問的內網網段 255.0.0.0 必填,子網掩碼 222.0...

Kafka 配置外網訪問

kafka 有的時候會跨機房接收訊息,本地開發機也需要向遠端伺服器發一些訊息,預設是不支援外連的,所以需要配置一下遠端訪問。kafka 伺服器 host 修改 檢視 hostname,檢視內網 ip 並記錄 cat etc hostname vm172 31 110 6.ksc.com ifconf...