1 hadoop搭建常用的Linux命令收集

2022-05-28 16:45:09 字數 919 閱讀 7802

大資料學習第一步:linux入門學習所需要的命令(非基礎卻常用)

chmod u+x /filepath/../filename  :  

u、g、o表示三個不同組,r、w、x表示可讀可寫可執行,+、-表示賦予和取消許可權

首先關閉防火牆:

service iptables stop

永久關閉:sudo chkconfig iptables off|on

使用securecrt上傳檔案時:

使用ftp上傳工具時:

service vsftpd start  :  開啟虛擬機器的ftp服務(當使用ftp的時候需要輸入此命令)

解壓檔案,安裝軟體

檔案內容檢視

cat filename     :   檢視檔案全部內容

more filename    :  翻頁檢視

tail -f filename   :  末尾內容檢視

head filename    :  檢視開頭檔案

g  :  命令狀態下,大寫的g可以直接誒到達文字的最後一欄  

dd  :  命令狀態下,刪除游標當前行  

zz  :  命令狀態下,立即儲存

建立檔案:

mkdir  :  建立資料夾

touch  :  建立檔案

ssh免密碼登陸:

首先在主節點機器上生成公鑰和私鑰,

1.命令:ssh-keygen -t rsa,四個回車

2.這樣就可以進入 cd ~/.ssh,在其下面看到id_rsa(私鑰)和 id_rsa.pub(公鑰)

3.拷貝公鑰給其他子節點機器,命令:ssh-copy-id 位址 

大資料1 HADOOP版本選擇

hadoop作為開源專案,很多分枝。也有很多社群的支援。所以hadoop版本發展很快。大部分情況下,我們可以選擇 完全開源,免費,非商業。apache社群的hadoop版本分枝較多,而且部分hadoop存在bug。在選擇hadoop,hbase,hive等時,需要考慮相容性。開源,免費,有商業和非商...

hadoop測試環境搭建1

廢話少說直接乾貨 在虛擬機器裡安裝hadoop,關閉防火牆 配置ip 我的系統環境為 win8系統 vmware11 centos8 1 設定虛擬機器網路通訊模式為host only模式 在虛擬機器目錄下找到vmnetcfg檔案 2 設定windows連線 3 修改linux系統的的ip 命令 if...

l常用的命令lin

cat 檢視檔案內容 cat 路徑 檔名 檔案的行數超過一屏,則顯示最後一屏 cat n 標記檔案的行數 tac 檔案倒著顯示 more 會分頁顯示檔案內容 不可向上分頁,可以向下分頁 f 空格 向下分頁 enter 回車 顯示下一行 q或者q 退出 less pgup向上翻頁 pgdn向下翻頁 搜...