Filebeat Kafka ELK綜合部署

2022-09-09 11:18:12 字數 1865 閱讀 9604

1.部署 zookeeper+kafka 集群

2.部署 filebeat 

#新增輸出到 kafka 的配置

1

output.kafka:

2 enabled: true

3 hosts: ["

192.168.208.60:9092

","192.168.208.50:9092

","192.168.208.40:9092

"] #指定 kafka 集群配置

4 topic: "

filebeat_test

"#指定 kafka 的 topic

#啟動 filebeat

3.部署 elk,在 logstash 元件所在節點上新建乙個 logstash 配置檔案

#啟動 logstash

1 logstash -f filebeat.conf
這裡有乙個錯誤集,出現下圖情況需要重啟(init 6),重啟後即可成功開啟

重啟虛擬機器後:

4.瀏覽器訪問 登入 kibana,單擊「create index pattern」按鈕新增索引「filebeat_test-*」,單擊 「create」 按鈕建立,單擊 「discover」 按鈕可檢視圖表資訊及日誌資訊。

綜合業務部 中介軟體平台 產品黃頁

一 資料層產品 tl沈詢 1 tddl cobar malanda tddlsequence 分布式資料層 對應cobar 特性是無server.多層結構 支援直接簡單主備mysql 直連。也支援分庫分表。還有sequence 都是這套元件上的東東啦。相關文件 tl 沈詢 主要聯絡人 君瑜 捷辰 雷...

可綜合不可綜合

學fpga給我最大的體會就是它的程式語言是並行執行的,不像c語言那樣一行一行的執行。verilog裡面有個always語句,所有的always語句塊全部併發執行,而always語句塊內部是逐行執行的 前提是只是用阻塞賦值 verilog中沒有中斷的概念,而逐行執行指令的c語言卻離不開中斷。學習ver...

HDL可綜合 不可綜合

verilog hdl和vhdl相比有很多優點,有c語言基礎的話很容易上手。蒐集了一些網上大神的經驗總結和書上的例子,所以對於和我一樣的初學者,這篇部落格應該還是很有提高作用的,至於具體語法,任何一本書都講的很詳細。hdl 是 hardware description language 的縮寫,中文...