hadoop 單機版部署

2021-09-25 22:42:05 字數 1266 閱讀 2051

mac hadoop 單機版部署

確定以安裝 brew

使用brew 安裝 hadoop

brew install hadoop
配置ssh localhost

設定免密登入 localhost

ssh-keygen -t rsa

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

ssh localhost // 測試是否成功

修改hadoop配置檔案

配置檔案路徑:/usr/local/cellar/hadoop/3.1.1/libexec/etc/hadoop

執行前需先格式化

執行路徑:/usr/local/cellar/hadoop/3.1.1/bin

./hdfs namenode -format
啟動路徑:/usr/local/cellar/hadoop/3.1.1/sbin

./start-dfs.sh  #啟動hdfs

./stop-dfs.sh #停止hdfs,當然不是現在停止啦

檢視啟動情況

單機版hadoop部署

單機版hadoop部署 解除安裝自帶的jdk,安裝自己的jdk 1.tar zxf tmp hadoop 2.6.5.tar.gz c usr local 解壓到 usr local中 2.cd usr local 3.mv hadoop 2.6.0 hadoop 將資料夾名改為hadoop 4.c...

storm單機版部署

zeromq jzmq storm zookeeper 解壓zookeeper,然後修改conf檔案中的zoo.cfg ticktime 2000 datadir var zookeeper clientport 2181 由於是單機版的,就只新增了這幾個引數,其中目錄需要自己先建立 啟動zooke...

Ubuntu安裝單機版hadoop注意事項

網上ubuntu安裝單機版的案例教程很多,本人參考 進行安裝。在建立hadoop使用者以及更改許可權時,在系統設定的介面可以把hadoop設定為管理員,從而具有root 的許可權。比如可以進入root目錄等。1.建立ssh 使用 sudo apt get install sshopenssh ser...