elk 使用中遇到的問題(kafka 重複消費)

2021-09-08 20:19:18 字數 265 閱讀 2260

問題描述:

在使用過程中,當遇到大量報錯的時候,我們到eagle後台看到報錯的那個consumer的消費情況到到lag 遠遠大於0(正常情況應該為0),activie  節點沒有,kibana面板上沒有資料。

因為我們報警使用的是logstash 的email 外掛程式,這裡猜測是因為大量的報錯,導致email 處理不過來,然後消費程序堵在了email 這裡,所以管道堵塞,導致無法消費,所以這裡的解決方案是

把logstash 的 email 換成  elastialert

Joggler 使用中遇到的問題

1.挑u盤 使用官方提供的系統起來從u盤讀取 資源的時候發現有的u盤認不出來。後來發現是u盤分割槽的問題。因為這個系統一定要掛接 dev sdx1這個分割槽,所以需要採用hdd格式的優盤,zip的是不認的 2.ubuntu上執行o2的圖形前端不能工作 這幅是使用出廠的mmcblock0p2裡的 op...

Git Gerrit 使用中遇到的問題

1.remote rejected release refs for release no new changes 非常惱人的乙個問題。在網上做了些搜尋後,都說是許可權配置問題。但是,事實上我已經有了onwer與push許可權。當然也可能是版本問題,因為gerrit的版本是2.1.0 最終還是把 p...

mysql使用中遇到的問題

問題一 第一次mysql啟動服務失敗,未返回報錯資訊 解決方法 執行 mysqld console命令,檢視error資訊,對症下藥 但一般情況下,主要是因為mysql目錄下的data資料夾中內容不正確,解決方法有以下兩個 1.在開啟服務前執行初始化命令 mysqld initalize 然後啟動服...