hadoop個人筆記,僅供自己參考

2021-06-19 16:53:55 字數 679 閱讀 7232

hadoop可以看做成乙個軟體,就是執行在linux系統上。

對集群上的檔案進行操作是,前面得加上hadoop fs,例如檢視集群上的更目錄下的檔案 hadoop fs -ls

將本地(linux系統)上的檔案放到集群中時,例如目錄input,下面有a.txt  b.txt這兩個檔案,首先轉到檔案所在的目錄input,使用hadoop fs -put  *.txt    (集群下指定的摸個目錄)/user/hadoop/hkcm。說明,hadoop集群預設的根目錄是/user/hadoop(我們這裡按照的目錄),所以,可以直接寫成hkcm也行。

檢視hadoop所有的命令:hadoop fs

執行hadoop:hadoop    jar    jar包     類名    輸入檔案目錄    輸出檔案目錄

例如,執行hadoop  demo中wordcount例子,首先要轉到hadoop安裝目錄下,然後,命令如下:hadoop jar hadoop-examples-1.0.4.jar wordcount hkcm/input hkcm/output,其中,我把搜有的輸入檔案放在hadoop的/user/hadoop/hkcm/input目錄下,指定的輸出結果存放在/user/hadoop/hkcm/output,特別說明,輸出目錄必須讓程式自動生成,如果自己先手動建立,那麼會報錯。

檢視jar中類:jar   tvf    ***.jar

normalizr實踐使用 個人總結,僅供參考

自編資料,本資料僅供參考 var aaaobj prolist totalpage 1 import from normalizr product schema const product new schema.entity products export const arrayofproducts...

C語言一些個人小筆記(僅供自己參考)

1.c語言允許直接訪問實體地址,能進行位 bit 操作,能實現組合語言的大部分功能,可以直接對硬體進行操作。因此有人把它稱為中級語言 2.資料型別可分為 基本資料型別,構造資料型別,指標型別,空型別void四大類。3.計算機中的原碼 反碼和補碼 總結一下,計算機儲存有符號的整數時,是用該整數的補碼進...

CSS個人學習筆記 僅供參考

div是css中的定位技術,全稱division,即為劃分,有時可以稱為圖層。div元素是用來為html文件內大塊的內容提供結構和背景的元素。通俗來說,div在頁面布局中,主要作為承載內容的容器!沒有任何的預設樣式,所有的外觀樣式都需要我們自己調整。css是一種用來表現html或xml等檔案樣式的計...