安裝Hadoop的偽分布式安裝

2021-09-07 19:44:26 字數 1567 閱讀 5655

給乙個可執行的許可權:

chmod u+x hadoop-2.7.1.tar.gz

2配置環境,如圖:

3使檔案生效:

source /etc/profile

4修改4個配置檔案,分別是core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml(hadoop-env.sh、yarn-env.sh)

5格式化namenode

bin/hdfs namenode –format

6啟動我們的hdfs系統

7啟動我們的yarn:

8連續建立兩級目錄:

9上傳檔案到指定的目錄:

bin/hdfs dfs –put /etc/hadoop/*.xml /user/derek

10、bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.1.jar grep /user/derek /user/output 'dfs[a-z.]+'

11關閉hdfs、yarn

sbin/stop-dfs.sh

sbin/stop-yarn.sh

Hadoop偽分布式安裝

帶尺寸的 當然,我們為了讓使用者更加便捷,我們增加了拖拽功能。去部落格設定頁面,選擇一款你喜歡的 片高亮樣式,下面展示同樣高亮的 片.an highlighted block var foo bar 專案1專案2 專案3乙個簡單的 是這麼建立的 專案value 電腦 1600 手機 12 導管 1 ...

hadoop分布式安裝

工欲善其事,必先利其器。在資料橫行的時代,我們的大神hadoop 出來了,作為分布式處理資料 不但快,而且一般用配置不高的電腦業可以做集群。那麼,現在就開始安裝我們的hadoop 進入hadoop之旅 檔案,這裡就去 apache 的命令進行解壓 tar zxvf hadoop x.tar.gz 好...

hadoop偽分布式

首先是本機模式的搭建,如 1 hdfs dfs ls 檢視本地分布式檔案系統,查詢結果為你本機linux檔案系統,說明你的本地模式已經搭建成功 2 進入安裝目錄hadoop資料夾下,進入etc hadoop下對四個配置檔案進行配置 core site.xml hdfs site.xml mapred...