MapReduce幾種提交方式

1.在windows裡的ide直接執行main方法，會將job提交給本地執行器localjobrunner執行

---本地存放hadoop安裝包

---輸入輸出資料可以放在本地路徑下(c:/wc/srcdata/)

---輸入輸出資料也可以放在hdfs中(hdfs://centos7one:9000/wc/output3)

2.在linux的ide直接執行main方法，會將job提交給本地執行器localjobrunner執行

---輸入輸出資料可以放在本地路徑下(/usr/local/wc/srcdata/)

---輸入輸出資料也可以放在hdfs中(hdfs://centos7one:9000/wc/output3)

1.將工程打成jar包，上傳到伺服器，用hadoop命令提交，hadoop jar wc.jar

2.在linux的ide中執行，需要新增mapred-site.xml和yarn-site.xml

3.在windows的ide中執行，本地存放hadoop安裝包，需要將lib和bin目錄替換成編譯出的檔案

posted @

2019-03-11 09:04

rest探路者 閱讀(

...)

編輯收藏

MapReduce幾種提交方式

1.在windows裡的ide直接執行main方法，會將job提交給本地執行器localjobrunner執行 本地存放hadoop安裝包 輸入輸出資料可以放在本地路徑下 c wc srcdata 輸入輸出資料也可以放在hdfs中 hdfs centos7one 9000 wc output3 2....

html form提交的幾種方式

一.乙個form有多個button提交，html5之前的解決方式 1 html中定義多個type submit的button，name相同，value不同 按鈕點下後，提交form用tpye submit 如果不想提交，而是執行js的時，type button 2 在後台，request.get或p...

MapReduce程式的幾種提交執行模式

本地模型執行 1 在windows的eclipse裡面直接執行main方法，就會將job提交給本地執行器localjobrunner執行 輸入輸出資料可以放在本地路徑下 c wc srcdata 輸入輸出資料也可以放在hdfs中 hdfs weekend110 9000 wc srcdata 2 在...