flume 高可用集群

2021-09-29 01:16:59 字數 518 閱讀 4087

傳送時也是batch和time共同控制

conf檔案配置時,要小心不可見字元,最好從官網複製,或者手打

1、資料來源source端配置

source端,配置1個source,1個channel,2個sink,配置了sink 組後,由於是fail over,每次只使用乙個sink,所以配置1個channel就可以了

a1.sources = r1

a1.channels =c1

a1.sinks = s1 s2

a1.sinks.s1.channel = c1

a1.sinks.s2.channel = c1

#設定 sink group

#設定組的處理型別為 failover,可選的還有load_balance和default

#k1、k2在使用過程中只有乙個可用,且k1優先順序高於k2,如果k1宕機之後恢復之後

#可以使用的仍然是k1,而不是k2

a1.sinkgroups = g1

高可用集群

高可用集群主要實現自動偵測 auto detect 故障 自動切換 故障轉移 failover 和自動恢復 failback 簡單來說就是,用高可用集群軟體實現故障檢查和故障轉移 故障 備份主機切換 的自動化,當然像負載均衡 dns分發也可提供高可性。active passive 主備模型 acti...

Keepalived Nginx高可用集群

安裝環境 centos6.6 x64 nginx版本 1.9.3 keepalived版本 1.2.18 ipvip 主節點192.168.11.21 192.168.11.20 備節點192.168.11.22 192.168.11.20 1.1 安裝openssl tar zxvf openss...

高可用集群 fence

一 物理機安裝fence 開啟服務,並做相應設定 刪除生成的鑰匙,重新擷取 rm fr etc cluster fence xvm.key dd if dev urandom of etc cluster fence xvm.key bs 128 count 1 重啟服務 systemctl res...