Hadoop完全分布式的搭建

2021-10-22 15:43:01 字數 1014 閱讀 2259

注:所有節點需要處於同一區域網下,條件限制,我們可以開啟手機熱點

一:配置好網路

1.修改3個hadoop配置檔案中的ip

cd /usr/local/hadoop-2.7.3/etc/hadoop/

vim core-site.xml

vim hdfs-site.xml

vim yarn-site.xml

2.更改網路設定中的ip,閘道器,dns,子網掩碼(根據熱點的這些網路屬性改)

二:更改機名(方便管理)

1.檢視機名

2.更改機名(我是從節點)

四:關閉防火牆,測試能否ping通網段下其他主機

主機和虛擬機器都關

虛擬機器:檢視防火牆,活動的是開著,不活動表示關

五:設定節點之間免密登入

a傳輸公鑰到b,此時要輸入b的虛擬機器密碼

b接收a的公鑰,並追加到authorized_keys中

則a可以通過ssh,免密登入到b中

ssh node00

hadoop完全分布式搭建

完全分布式搭建需要至少三個節點 下面的配置必須在三個節點上都得配置 這裡只說明一台的配置 1 ip配置 進入root使用者 vim etc sysconfig network scripts ifcfg eth0 配置本主機的ip位址 ipaddr 192.168.25.128 ip位址 gatew...

Hadoop 分布式環境搭建

靜態ip 右擊寬頻連線network connections system eth0 ipv4 settings method manual addressse 192.168.斷開 連線 拷貝一台虛擬機器 虛擬機器 管理 轉殖 建立完整轉殖 ip設定 右擊網路連線 vi etc udev rule...

hadoop偽分布式搭建

因為hadoop偽分布式我已在本地搭建並且執行成功。為了加快學習不足同時分享搭建。直接將不足貼出來,如有不同意見還忘評價共同提公升。hadoop 偽分布模式 hdfs yarn 另外補充下 hadoop2.0之後不包含mapreduce 環境搭建準備 1,vmware 安裝 如果你使用的事virtu...