大資料集群搭建過程(學習筆記)

2021-09-23 14:13:17 字數 577 閱讀 8428

1.安裝linux系統

虛擬機器採用的是vmvare,系統採用的是centos6.5精簡版  centos-6.5-x86_64-minimal.iso檔案,選擇自定義安裝

1.1網路模式選擇net模式,磁碟空間及記憶體處理器大小個數看系統環境配置,系統選擇稍後安裝。

1.2配置硬碟分割槽,分別是 /boot  大小:200mb    /swap  大小:2048mb   /   大小:剩餘所有空間

2.配置ip,檔案路徑為:/etc/sysconfig/network-scripts/ifcfg-eth0  修改至如圖:

然後刪除路徑/etc/udev/rules.d/下的70-persistent-net.rules檔案

3.轉殖此節點,為避免意外,建議儲存快照

3.1轉殖可選擇鏈結轉殖方式,節省時間空間

3.2配置轉殖過的節點的ip,即將ipaddr最後的數字改為相鄰的數字

3.3配置轉殖節點的主機名,路徑為   /etc/sysconfig/network

大資料學習 Storm集群搭建

安裝storm之前要安裝zookeeper 一.安裝storm步驟 2.解壓安裝包 3.修改配置檔案 修改環境變數 etc profile export path bin path 指定storm使用的zk集群 storm.zookeeper.servers mini1 mini2 mini3 指定...

大資料平台搭建 kafka集群的搭建

本系列文章主要闡述大資料計算平台相關框架的搭建,包括如下內容 kafka是乙個分布式 分割槽的 多副本的 多訂閱者的訊息佇列,以高吞吐量著稱,主要用於實時資料的傳輸和處理,總體架構如下 本文環境列表 直接在伺服器10.20.112.59上解壓 cd tar zxvf kafka 2.11 0.10....

Eureka集群搭建 學習筆記

一 建立三個eureka server的model,cloud eureka server7001,cloud eureka server7002,cloud eureka server7003,二 修改pom檔案,org.springframework.cloud spring cloud sta...