Hadoop 3 1 0 單機版偽分布式的搭建

2021-09-06 20:50:40 字數 2770 閱讀 4948

所需軟體如下圖所示:

大資料插架都在於此:

jdk:

1.2.1  關閉防火牆

centos6.5 防火牆的命令:

只用root使用者才能對防火牆進行操作:

service iptables status

service iptables stop;

service iptables restart;

systemctl stop firewalld.service #停止firewall

systemctl disable firewalld.service #禁止firewall開機啟動

systemctl status firewalld.service #檢視firewall的狀態

1.2.2  修改主機名

vim  /etc/sysconfig/network     #修改主機名

centos7 特有的修改主機的方式:

hostnamectl set-hostname

naidong  #永久性,並且立即生效

1.2.3  修改主機ip

bootproto的方式有:none 不設定;dhcp 動態獲取;static 靜態配置

dhcp動態獲取方式

vim/etc/sysconfig/network-scripts/ifcfg-ens33

type="ethernet"

proxy_method="none"

browser_only="no"

bootproto="dhcp"

defroute="yes"

ipv4_failure_fatal="no"

ipv6init="yes"

ipv6_autoconf="yes"

ipv6_defroute="yes"

ipv6_failure_fatal="no"

ipv6_addr_gen_mode="stable-privacy"

name="ens33"

uuid="faae9218-1e5c-41c2-be4d-954e08f47970"

device="ens33"

onboot="yes"

2.不指定方式

vim  /etc/sysconfig/network-scripts/ifcfg-eth0   #修改ip

device=eth0

type=ethernet

uuid=53bf9bda-633b-480f-b006-a43e0a3ce113

onboot=yes

nm_controlled=yes

bootproto=none #none

不指定,

dhcp,動態獲取,static靜態獲取

#bootproto=static

ipaddr=192.168.2.121

netmask=255.255.255.0

dns1=192.168.2.1

broadcast=192.168.2.1

arpcheck=no

#gateway=192.168.2.255

prefix=24

defroute=yes

ipv4_failure_fatal=yes

ipv6init=no

name="system eth0"

hwaddr=00:22:68:17:03:c9

gateway=192.168.2.1

last_connect=1461421962

1.2.4  ip與主機名之間的對映

vim /etc/hosts   #修改主機名和ip的關聯對映

檢視主機名:

還是沒有改變,重新啟動系統,輸入:reboot

root@localhost ~]# hostname

naidong

[root@localhost ~]#

注意:以上操作配置完成後,需要重新啟動機器,讓配置生效!!!

單機版hadoop部署

單機版hadoop部署 解除安裝自帶的jdk,安裝自己的jdk 1.tar zxf tmp hadoop 2.6.5.tar.gz c usr local 解壓到 usr local中 2.cd usr local 3.mv hadoop 2.6.0 hadoop 將資料夾名改為hadoop 4.c...

hadoop 單機版部署

mac hadoop 單機版部署 確定以安裝 brew 使用brew 安裝 hadoop brew install hadoop配置ssh localhost 設定免密登入 localhost ssh keygen t rsa cat ssh id rsa.pub ssh authorized ke...

Ubuntu安裝單機版hadoop注意事項

網上ubuntu安裝單機版的案例教程很多,本人參考 進行安裝。在建立hadoop使用者以及更改許可權時,在系統設定的介面可以把hadoop設定為管理員,從而具有root 的許可權。比如可以進入root目錄等。1.建立ssh 使用 sudo apt get install sshopenssh ser...