大資料 一 hadoop3 2 1集群部署

2021-10-02 04:31:48 字數 1909 閱讀 7395

環境說明:

作業系統:centos8

jdk:13

hadoop:3.2.1

以下命令可以一鍵執行:

1、系統配置

echo "192.168.1.154 hadoop1" >> /etc/hosts

echo "192.168.1.155 hadoop2" >> /etc/hosts

echo "192.168.1.156 hadoop3" >> /etc/hosts

systemctl stop firewalld

systemctl disable firewalld

2、授信

參考:3、解壓配置hadoop:三颱伺服器完全一致的配置

4、初始化集群節點:

hadoop namenode -format

5、啟動

sbin/start-all.sh

6、測試

cd /tmp

echo "hello hadoop" > hadoop-test.txt

#上傳hadoop fs -put hadoop-test.txt /

#查詢hadoop fs -ls /

rm hadoop-test.txt

Hadoop 3 2 2 集群安裝

一 虛擬機器環境準備 系統主機 位址hadoop版本 jdk版本 centos9 hadoop01 10.211.55.4 3.2.2 1.8.0 322 centos9 hadoop02 10.211.55.7 3.2.2 1.8.0 322 centos9 hadoop03 10.211.55....

HADOOP集群搭建 8 集群時間同步

1 檢查是否安裝ntp rpm qa grep ntp 安裝ntp yum install y ntp 安裝成功截圖 2 修改ntp配置檔案 修改3處 restrict 192.168.183.0 mask 255.255.255.0 nomodify notrap server 0.centos....

Hadoop 2 7 3集群(YARN)搭建

1 修改mapred site.xml mapreduce.framework.name yarn 2 修改yarn site.xml yarn.resourcemanager.hostname chan takchi the hostname of the rm.yarn.nodemanager....