Hadoop目錄詳解

2021-10-10 06:24:32 字數 553 閱讀 4222

tmp目錄:主要用作mapreduce操作期間的臨時儲存。 mapreduce工件,中間資料等將儲存在該目錄下。 mapreduce作業執行完成後,這些檔案將自動清除。如果刪除此臨時檔案,則可能會影響當前正在執行的mapreduce作業

etc目錄:hadoop的配置檔案目錄,存放hadoop的配置檔案

share目錄:存放hadoop的依賴jar包和文件,文件可以被刪除掉

lib目錄:存放hadoop的本地庫(對資料進行壓縮解壓縮功能)

log目錄:namenode、datanode、resourcemanage 等系統自帶的服務輸出來的日誌預設是存放在 $/logs 目錄下

include目錄:對外提供的程式設計庫標頭檔案(具體的動態庫和靜態庫在lib目錄中),這些檔案都是用c++定義的,通常用於c++程式訪問hdfs或者編寫mapreduce程式。

lib目錄:包含了hadoop對外提供的程式設計動態庫和靜態庫,與include目錄中的標頭檔案結合使用。

10.libexec目錄:各個服務對應的shell配置檔案所在的目錄,可用於配置日誌輸出目錄、啟動引數(比如jvm引數)等基本資訊。

Hadoop安裝目錄

第一步驟 vi core site.xml fs.defaultfs hdfs hadoop000 8020 hadoop.tmp.dir data hadoop repo 第二步驟 第三步驟 第四步驟 啟動hdfs 第一次執行的時候一定要格式化檔案系統,不要重複執行 說明成了 第五步驟 第五步驟 ...

Hadoop目錄結構

atguigu hadoop101 hadoop 2.7.2 ll顯示如下 總用量 52 drwxr xr x.2 atguigu atguigu 4096 5月 22 2017 bin drwxr xr x.3 atguigu atguigu 4096 5月 22 2017 etc drwxr x...

Hadoop的目錄結構

rw r r 1 marron27 staff 106210 10 23 2019 license.txt rw r r 1 marron27 staff 15841 10 23 2019 notice.txt rw r r 1 marron27 staff 1366 10 23 2019 read...