bin目錄下hadoop指令碼使用

2021-06-23 02:15:27 字數 766 閱讀 8004

一、hadoop指令碼使用方法

hadoop [--config confdir] command

--config 用於設定hadoop配置檔案目錄,預設目錄為%/conf

command 命令

二、具體操作

1. hdfs管理命令

bin/hadoop command [genericoptions] [commandoptions]

例:在hdfs上建立乙個目錄 /test

bin/hadoop fs -mkdir /test

2. 作業管理命令:

bin/hadoop command [genericoptions] [commandoptions]

例:顯示hadoop上所有正在執行的作業

bin/hadoop job -list

3.作業提交命令

hadoop jar [mainclass] args

例:採用擬蒙特卡洛法估算圓周率大小,輸入引數為map task數目和樣本數目

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar pi 5 10

hadoop之理解tmp目錄下的檔案

1 修改tmp路徑 解決辦法將原來name copy home crx tmp 這個路徑是之前在hadoop home etc hadoop core site.xml 中name標籤下配置的路徑 修改目錄後,新目錄是沒有之前的資料的。但之前的目錄依舊存在,所以需要將之前目錄裡的東西拷貝到 新目錄裡...

Shell指令碼統計當前目錄下目錄和檔案的數量

linux下如何統計當前目錄下檔案有多少個,目錄又有多少個呢?下面用shell寫乙個指令碼,放置在當前目錄下,執行即可。複製 如下 bin bash 指令碼名稱 dir 定義乙個函式fun directory fun directory jjuzvrcvnbsp 呼叫函式 fun directory...

乙個關於bin目錄下DLL動態編譯的問題

昨天碰到乙個怪怪的問題,有乙個button點選之後所有session都失效了,這段程式一直是執行正常的,突然出問題讓我有點不理解 後來終於找到了原因,這個出問題的button點選後會自動編譯乙個新的dll檔案出來,原來我們所有的業務dll都是放在乙個專門的ehrcorecomponents目錄,但是...