Hadoop學習之安裝Hadoop

2021-10-07 12:11:32 字數 786 閱讀 2474

1.用xftp工具將hadoop-2.7.2.tar.gz匯入到opt目錄下面的software資料夾

2.進入到hadoop安裝包路徑下

cd /opt/software/

3.解壓安裝檔案到/opt/module下面

tar -zxvf hadoop-2.7.2.tar.gz -c /opt/module/

4.檢視是否解壓成功

ls /opt/module/

hadoop-2.7.2

5.將hadoop新增到環境變數

(1)獲取hadoop安裝路徑

pwd

/opt/module/hadoop-2.7.2

(2)開啟/etc/profile檔案

sudo vi /etc/profile

在profile檔案末尾新增jdk路徑:

#hadoop_home

export hadoop_home=/opt/module/hadoop-2.7.2

export path=$path:$hadoop_home/bin:$hadoop_home/sbin

(3)儲存後退出

(4)讓修改後的檔案生效

source /etc/profile

6.測試是否安裝成功

hadoop version

hadoop 2.7.2

《Hadoop權威指南4》第1章 初識Hadoop

1.6 apache hadoop發展簡史 1.7 本書包含的內容 未來的資料很大,個人,公共網頁的資料等等都很多。大資料勝於好演算法。硬碟的讀寫速度很慢跟不上資料儲存分析的需要。hadoop的,hdfs和mapreduce解決了資料的儲存和分析的問題。mapreduce進行每一次查詢時要處理整個資...

Hadoop學習筆記之Hadoop簡介

apache hadoop 是乙個開源的 可靠的 靈活的 分布式的計算系統 來自官網 主要受google 三篇 的啟發 gfs mapreduce bigtable hadoop 海量資料的儲存 hdfs hadoop distributed file system 海量資料的分析 mapreduc...

Hadoop學習篇 之 1初識Hadoop

為什麼要創造 發明 使用 hadoop?hadoop的存在有什麼意義?資料的儲存面臨一系列的問題 雖然磁碟儲存容量快速增加,但訪問速度並沒有太大的變化。要實現對多個磁碟資料的並行讀寫,還有更多的問題要解決。總之,hadoop有著可靠的共享儲存和分析系統。hdfs實現儲存,而mapreduce實現分析...