環境搭建 NIFI集群

2021-10-06 11:35:11 字數 3228 閱讀 1112

環境:準備三颱nifi單例項的機器

ip系統

192.168.186.130

center os 7

192.168.186.131

center os 7

192.168.186.132

center os 7

注: nifi有整合的zookeeper, 可以不在單獨安裝, 而是通過nifi配置啟用內建zookeeper服務

1.3個節點都配置conf/zookeeper.properties

vim conf/zookeeper.properties
clientport

=2188

initlimit=10

autopurge.purgeinterval=

24synclimit=5

ticktime

=2000

datadir

=./state/zookeeper

autopurge.snapretaincount=

30

server.1=

192.168.186.130:3888:4888

server.2=

192.168.186.131:3888:4888

server.3=

192.168.186.132:3888:4888

2./nifi/nifi-1.11.4下建立檔案

mkdir state

mkdir state/zookeeper

echo

1> state/zookeeper/myid #根據節點創造不通的myid 1 2 3 。。為例

3.配置/nifi/nifi-1.11.4/conf/nifi.properties檔案

4.配置conf/state-management.xml

vim conf/state-management.xml
zk-provider

org.apache.nifi.controller.state.providers.zookeeper.zookeeperstateprovider

="connect string"

>

192.168.186.130:2188,192.168.186.131:2188,192.168.186.132:2188

="root node"

>/nifi

="session timeout"

>

10 seconds

="access control"

>open

相關命令

bin/nifi.sh start  #啟動命令

bin/nifi.sh stop #關閉命令

bin/nifi.sh status #檢視執行狀態

Nginx tomcat集群環境搭建

實驗環境 windows xp sp3 nginx版本 1.5.12 tomcat版本 6.0.39 一 配置nginx 2 d nginx nginx 1.5.12目錄結構 nginx conf 配置目錄 contrib.docs 文件目錄 logs 日誌目錄 temp 臨時檔案目錄 html 靜...

Linux集群環境搭建

集群 cluster 技術是一種較新的技術,通過集群技術,可以在付出較低成本的情況下獲得在效能 可靠性 靈活性方面的相對較高的收益,其任務排程則是集群系統中的核心技術。如果乙個事情是由多個人去完成,則有著和集群類似的地方。大家共同承擔著壓力,如果有的人臨時請假,其他的可以分擔他的任務,事情不會因此耽...

MPI集群環境搭建

我在前面兩篇部落格中簡要介紹了為什麼要平行計算以及mpi的一些學習心得,接下來我們正式開始mpi的學習之路。我們知道mpi是分布式記憶體程式設計,所以這篇部落格會詳細講解mpi集群環境的搭建過程。選擇linux版本 這裡我選擇的是ubuntu14.04,其他linux版本如centos fedora...