hadoop執行自帶例項wordcount

2021-10-04 22:59:44 字數 711 閱讀 6489

作業系統:ubuntu

hadoop版本:3.1.3

cd /usr/local/hadoop

bin/hdfs namenode -format#格式化namenode

./sbin/

start

-dfs.sh

bin/hdfs dfs -mkdir /input#新建input資料夾

bin/hdfs dfs -put input/*

/input#將本地的input資料夾下內容傳到hdfs系統的input資料夾中

#本地input資料夾內容可以自己建立,建立乙個名為word的檔案,內容隨意存放英文內容即可

bin/hdfs dfs -

ls/input

bin/hdfs dfs -

cat/input/word#顯示內容

bin/hadoop jar .

/share/hadoop/mapreduce/hadoop-mapreduce-examples-*

.jar wordcount /input/word /output#注意空格

bin/hdfs dfs -

cat/output/*

#檢視輸出內容

sbin/stop-dfs.sh#關閉程序

Hadoop例項執行

1 要使用 hdfs,首先需要在 hdfs 中建立使用者目錄,也可以使用預設根目錄 zhaojunyandemacbook pro zhaojunyan hdfs dfs mkdir p usr hadoop 預設根目錄是 hdfs localhost 9000 user zhaojunyan 2 ...

執行hadoop 自帶的例子

1.在 hadoop 目錄下建立 localfile 目錄 儲存本地的 檔案,mkdir localfile 2.建立 檔案 word count 檔案 輸入 檔案內容 vi word count 3.建立 遠端 檔案目錄 hadoop fs mkdir test examples 4.hadoop...

如何執行Hadoop自帶的例子

bin hadoop jar share hadoop mapreduce hadoop mapreduce examples 2.6.4.jar wordcount wordcount wordcount wcoutput輸出檔案不能實現存在,比如說 wordcount這樣是不行的 雖然他是第一級...