spark分布式環境搭建（2）分布式環境準備

ps:我已經複製好了

開啟三颱機器，它們的環境都是一樣的（是複製得到的集群）

目標:修改三颱機器的hostname修改三颱機器的ip修改三颱機器的hosts三颱機器做免密登入

vim /etc/hostname

修改三颱機器的網路

vim /etc/sysconfig/network-scripts/ifcfg-ens33 

## 將ipaddr這欄修改為192.168.1.11或者192.168.1.12

注意，一定要將三颱機器的ip位址修改為不一樣的。

至此,三颱機器的相關配置如下:

引數名稱

機器a機器b

機器cip

192.168.1.10

192.168.1.11

192.168.1.12

hostname

spark1

spark2

spark3

配置三颱機器的hosts

vim /etc/hosts

192.168.1.10 spark1

192.168.1.11 spark2
192.168.1.12 spark3

開始免密登入

在hostname為spark1的機器上面

ssh-keygen -t rsa

## 然後敲回車就好了

ssh-copy-id spark1

ssh-copy-id spark2
ssh-copy-id spark3
## 每執行一次都要輸入一次密碼，因為是第一次登入，之後就可以不用輸入密碼了

scp /etc/hosts spark2:/etc

scp /etc/hosts spark3:/etc

至此分布式環境準備結束,下面開始安裝hadoop分布式檔案系統,下篇文章見。

分布式 2分布式事務

分布式 1概述cap和base 分布式 2分布式事務 分布式 3分布式一致性演算法 分布式 4集群 分布式 5服務限流演算法 分布式 6分布式id 分布式 7效能壓測 分布式 8日誌鏈路跟蹤 分布式 9分布式鎖 redis鎖的幾種實現 參考 分布式系統間各種問題 宕機 網路不穩定 本地事務無法滿足需...

Spark 連線Hive分布式環境搭建

建立使用者 adduser username chmod u w etc sudoers vim etc sudoers chmod u w etc sudoers 原始碼編譯mysql 5.5 安裝多個版本的mysql 安裝cmake plain view plain copy tar zxvf ...

分布式隨筆1 分布式概述

分布式，好寬泛的話題，來來咱扯兩句。你乙個人再強壯，也扛不了100袋大公尺，單機的資源也很有限，大 的大資料量 高併發以及各種業務需求 童鞋們的web應用，伺服器 rdb mq 服務 快取以及各類基礎設施，更別說還有安全 大資料方面的需求 於是，我們常見的面向服務的dubbo springcloud...