hadoop的一些名詞解釋

2022-04-11 06:02:47 字數 338 閱讀 2587

在網上收集了一些mapreduce中常用的一些名詞的解釋,分享一下:

shuffle(洗牌):當第乙個map任務完成後,節點可能還要繼續執行更多的map 任務,但這時候也開始把map任務的中間輸出交換到需要它們的 reducer那裡去,這個移動map輸出到 reducer 的過程叫做shuffle。

排序(sort):每乙個reduce任務負責歸約(reduceing)關聯到相同鍵上的所有數值,每乙個節點收到的中間鍵集合在被送到具體的reducer那裡前就已經自動被hadoop排序過了。

reporter:是用於map/reduce應用程式報告進度,設定應用級別的狀態訊息, 更新counters(計數器)的機制。

WinCE的一些名詞解釋

1.oem original equipment manufacturer 原始裝置製造商。微軟把oem這個詞引入windows ce,其意思是一些製作硬體主機板的廠商可以根據自己的產品特點對windows ce進行定製,從而使windows ce可以執行在這些廠商的主機板上,在 硬體開發板的同時,...

一些概念及名詞解釋

1.去中心化 不是不要中心,而是中心的多元化。1 通俗的解釋 任何人都可以成為中心,任何中心都不是永久的,中心對每個 人不具備強制作用。微博上有著很多明星是影響眾人的中心,每個明星都是靠著粉絲的擁簇,都在一定時期內影響著別人,他沒有強制影響粉絲的權力,哪一天他不紅了他的中心影響力便會不斷削弱。微博上...

一些安全名詞解釋

1 poc proof of concept,為觀點提供證據,在計算機安全中,指的是 為你發現的漏洞提供乙個測試證明。2 exp exploit,在計算機安全中,指的是 漏洞利用,有漏洞不一定就有exploit,有exploit就肯定有漏洞。測試者利用它來攻擊乙個系統,程式,或服務,以獲得開發者意料...