超爛的ELK之filebeat讀取 已解決

2021-09-07 12:45:39 字數 1425 閱讀 2594

搞了無數次的filebeat-->logstash今天栽了跟頭

filebeat在讀取如下檔案的時候,openchgw.log 軟連線speechgw.log.20170703183729檔案

lrwxrwxrwx 1 admin admin        44 jul  3 18:37speechgw.log-> /home/admin/logs/speechgw.log.20170703183729

如果filebeat中配置

#*************************== filebeat prospectors *************************====filebeat.prospectors:

# each -is a prospector. most options can be set at the prospector level, so

# you can use different prospectors

forvarious configurations.

# below are the prospector specific configurations.

-input_type: log

paths:

- /home/admin/logs/speechgw.logdocument_type: open-gw

則不會收取日誌,必須配置如下成實體檔案,才能夠成功。

#*************************== filebeat prospectors *************************====filebeat.prospectors:

# each -is a prospector. most options can be set at the prospector level, so

# you can use different prospectors

forvarious configurations.

# below are the prospector specific configurations.

-input_type: log

paths:

- /home/admin/logs/speechgw.log.20170703183729

document_type: open-gw

感覺elk是不是應該修復一下這個問題。

在filebeat.full.yml中開啟引數

symlinks: true

解決問題。多謝zolinxu @zolinxu 2018-02-28的指教。

謝謝!

(五)ELK系列之Filebeat搭建

一 elk系列之elk介紹 二 elk系列之elasticsearch搭建 三 elk系列之kibana搭建 四 elk系列之logstash搭建 1 filebeat包準備 提取碼 fbjo 當然也可以直接用wget在linux裡面獲取 root es1 master node test wget...

ELK日誌處理之Filebeat工作原理

beats是elastic stack技術棧中輕量級的日誌採集器,beats家族包括以下五個成員 elk架構中使用logstash收集 解析日誌,但是logstash對記憶體 cpu io等資源消耗比較高。相比 logstash,beats所佔系統的cpu和記憶體幾乎可以忽略不計。elasticse...

ELK日誌處理之Filebeat工作原理

beats是elastic stack技術棧中輕量級的日誌採集器,beats家族包括以下五個成員 filebeat 輕量級的日誌採集器,可用於收集檔案資料。metricbeat 5.0版本之前名為topbeat,蒐集系統 程序和檔案系統級別的 cpu 和記憶體使用情況等資料。packetbeat 收...