寫幾個Hadoop部署用到的小指令碼

2021-09-04 13:11:51 字數 1380 閱讀 8670

最近拋棄非ssh連線的hadoop集群部署方式了,還是回到了用ssh key 驗證的方式上了。這裡面就有些麻煩,每台機器都要上傳公鑰。恰恰我又是個很懶的人,所以寫幾個小指令碼完成,只要在一台機器上面就可以做公鑰的分發了。

首先是生成ssh key指令碼

#!/bin/sh

ssh-keygen -t rsa -p '' -f ~/.ssh/id_rsa

cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys

ssh-keygen一般來說需要輸入passphrase,但是一般都是三個回車過去了,我懶的輸入,加上-p ''就不用了。

然後是新增公鑰到從節點的指令碼

#!/bin/sh

read -p "輸入遠端伺服器ip: " ip

ssh-copy-id -o stricthostkeychecking=no -i ~/.ssh/id_rsa.pub root@$ip

ssh root@$ip 'sed -i "s/^#rsaauthentication\ yes/rsaauthentication\ yes/g" /etc/ssh/sshd_config'

ssh root@$ip 'sed -i "s/^#pubkeyauthentication\ yes/pubkeyauthentication yes/g" /etc/ssh/sshd_config'

ssh root@$ip 'sed -i "s/^#permitrootlogin\ yes/permitrootlogin\ yes/g" /etc/ssh/sshd_config'

ssh root@$ip 'service sshd restart'

hostname=`ssh root@$ 'hostname'`

echo "新增主機名和ip到本地/etc/hosts檔案中"

echo "$ip $hostname" >> /etc/hosts

echo "遠端主機主機名稱為$hostname, 請檢視 /etc/hosts 確保該主機名和ip新增到主機列表檔案中"

echo "主機公鑰複製完成"

然後是第三個指令碼讀取主機列表然後把/etc/hosts複製到所有主機上

#!/bin/sh

cat /etc/hosts | while read line

do ip=`echo $line | awk '' | grep -v "::" | grep -v "127.0.0.1"`

echo "copying /etc/hosts to $"

scp -o stricthostkeychecking=no /etc/hosts root@$:/etc/

done

不解釋了

寫幾個Hadoop部署用到的小指令碼

最近拋棄非ssh連線的hadoop集群部署方式了,還是回到了用ssh key 驗證的方式上了。這裡面就有些麻煩,每台機器都要上傳公鑰。恰恰我又是個很懶的人,所以寫幾個小指令碼完成,只要在一台機器上面就可以做公鑰的分發了。首先是生成ssh key指令碼 bin sh ssh keygen t rsa ...

初學寫的幾個autoit小程式

哈哈,剛學,很簡單的乙個而已 僅僅在xp sp3 chs系統中測試過 send r winwaitactive class 32770 沒有使用標題,而是使用類,為了防止英文版等系統不相容 send cmd winwaitactive class consolewindowclass send ec...

Jexus webApi程式的部署幾個小坑

今天上午寫了jexus linux環境下的部署,下午去實現了乙個,出現了一些問題,下面總結一下 一 首先要對jexus進行修改 usr jexus jws 刪除下面的這行,解決csc檔案未找到問題 export mono iomap all 二 刪除 專案裡的包包 microsoft.codedom...