mr執行過程中的一些引數

安裝hadoop時從源**拷貝過來的，我們可以直接使用

[grid@h1 hadoop-0.20.2]$ bin/hadoop jar hadoop-0.20.2-examples.jar wordcount in out   

把這個jar包裡wordcount功能提交給map_reduce當做乙個作業執行，測試map_reduce系統是否可以正常工作，in  輸入資料目錄（資料來源） out 輸出資料目錄（即輸出到**）

12/09/17 20:39:06 info input.fileinputformat: total input paths to process : 2

12/09/17 20:39:07 info mapred.jobclient: running job: job_201209172027_0002        運

行作業號「2023年9月17日1856不是時間」

12/09/17 20:39:08 info mapred.jobclient:  map 0% reduce 0%                         

12/09/17 20:40:34 info mapred.jobclient:  map 50% reduce 0%

12/09/17 20:40:49 info mapred.jobclient:  map 100% reduce 0%                       

map  reduce進度

12/09/17 20:41:02 info mapred.jobclient:  map 100% reduce 100%

12/09/17 20:41:04 info mapred.jobclient: job complete: job_201209172027_0002      

作業完成

12/09/17 20:41:04 info mapred.jobclient: counters: 17

12/09/17 20:41:04 info mapred.jobclient:   job counters                           

作業計數器

12/09/17 20:41:04 info mapred.jobclient:     launched reduce tasks=1               

啟動reduce任務1個

12/09/17 20:41:04 info mapred.jobclient:     launched map tasks=3                  

啟動map任務3個

12/09/17 20:41:04 info mapred.jobclient:     data-local map tasks=3

12/09/17 20:41:04 info mapred.jobclient:   filesystemcounters                     

檔案系統計數器

12/09/17 20:41:04 info mapred.jobclient:     file_bytes_read=59

12/09/17 20:41:04 info mapred.jobclient:     hdfs_bytes_read=29

12/09/17 20:41:04 info mapred.jobclient:     file_bytes_written=188

12/09/17 20:41:04 info mapred.jobclient:     hdfs_bytes_written=29

12/09/17 20:41:04 info mapred.jobclient:   map-reduce framework                   

map_reduce框架

12/09/17 20:41:04 info mapred.jobclient:     reduce input groups=3                

reduce輸入組3

12/09/17 20:41:04 info mapred.jobclient:     combine output records=4              

合併輸出記錄4

12/09/17 20:41:04 info mapred.jobclient:     map input records=2                  

map輸入記錄2

12/09/17 20:41:04 info mapred.jobclient:     reduce shuffle bytes=65               

reduce shuffle=預處理 減少計算量 算的更快

12/09/17 20:41:04 info mapred.jobclient:     reduce output records=3             

reduce輸出記錄3

12/09/17 20:41:04 info mapred.jobclient:     spilled records=8                     

溢位記錄8

12/09/17 20:41:04 info mapred.jobclient:     map output bytes=45                  

map輸出位元組45

12/09/17 20:41:04 info mapred.jobclient:     combine input records=4               

合併輸入記錄4

12/09/17 20:41:04 info mapred.jobclient:     map output records=4                  

map輸出記錄4

12/09/17 20:41:04 info mapred.jobclient:     reduce input records=4               

reduce輸入記錄4