Hadoop學習筆記 4 小案例測試

2021-06-26 21:39:31 字數 809 閱讀 9269

成功啟動hadoop後,我們用乙個小例子來測試。

我們用hadoop自帶的統計單詞個數的功能

1.建立需要被統計的檔案test.txt並寫進內容:

echo "hello world hello hadoop" > test.txt
2.在hdfs系統中建立乙個input資料夾:

bin/hadoop fs -mkdir /home/使用者名稱/input
3.將test.txt放入input資料夾

bin/hadoop fs -put test.txt /input
檢查是否上傳成功

bin/hadoop fs -ls /input
4.執行hadoop使用hadoop-example-1.0.3.jar中的統計單詞個數功能

bin/hadoop jar hadoop-example-1.0.3.jar wordcount /home/使用者名稱/input/test.txt /home/使用者名稱/output

5.檢視執行結果

bin/hadoop fs -text /home/使用者名稱/output/part-r-00000

訪問hadoop webui

開啟瀏覽器訪問http://localhost:50070 可以檢視整個分布式檔案系統的狀態

開啟瀏覽器訪問http://localhost:50030 可以檢視jobtracker的執行狀態

Week4 案例分析

二級標題的顯示問題 可以看到在 資訊 推送列表的首頁,部分大標題下面出現了一些 不和諧 的 並且這段 只出現在了 資訊 模組下面的內容預覽中,簡單對比出現這種 bug 的文章與未出現 bug 的文章,並沒有發現明顯區別。的顯示問題 首先,我覺得這個功能在手機端的體驗本身就非常不好,由於螢幕尺寸的限制...

HTML CSS學習二案例

搜尋 氣溫41.4 地溫66.5!北京強勢迎七月首個高溫日 今天,華北 黃淮一帶的高溫持續發酵,截至今天下午2點,陝 西北部 山西西南部 河北南部 北京 天津 山東西部 河南 北部最高氣溫已普遍超過35 大城市中,北京 天津 鄭州均迎來 高溫日。在陽光暴曬下,地表溫度也逐漸走高。今天下午2點,華北黃...

前端學習 002 案例(花花旋轉)

我覺得最重要的是我們享受這門技術所做出的一些案例 專案 以此讓我們感受到其技術帶給我們的神秘感,和極強的探索欲。當然之後,工作也就有了,興趣肯定也有了 我覺得最重要的就是這門技術所實現的效果,讓我們對此驚嘆並瘋狂,這就是我們要學習的初衷。而不是在什麼都不懂得情況下去學習,然後幾年後發現自己不喜歡了,...