hadoop webhdfs 服務開啟及使用

2021-07-11 14:13:18 字數 1927 閱讀 7308

1.配置

namenode的hdfs-site.xml是必須將dfs.webhdfs.enabled屬性設定為true,如果通過ambari安裝,則可以通過介面進行設定

在namenode和一台datanode中向/etc/hdp/conf/hdfs-site.xml中新增屬性:

<property>

<name>dfs.webhdfs.enabled

<value>true

2.使用說明

3.curl操作webhdfs

建立並寫乙個檔案

注意這個地方填入的是datanode的資訊

在乙個檔案內追加內容

建立乙個目錄

開啟並讀取乙個檔案

重名命檔案、資料夾

curl -i -x put ":/webhdfs/v1/?op=rename&destination="

刪除檔案/資料夾

目錄列表

檔案/ 資料夾的狀態資訊

獲取目錄的上下文環境彙總資訊

獲取home 目錄

獲取check sum file

設定許可權

設定所有者

設定備份

使用時注意js呼叫跨域問題

Hadoop webHDFS設定和使用說明

原文 1.配置 namenode的hdfs site.xml是必須將dfs.webhdfs.enabled屬性設定為true,否則就不能使用webhdfs的liststatus listfilestatus等需要列出檔案 資料夾狀態的命令,因為這些資訊都是由namenode來儲存的。在namenod...

FTP服務 Web服務

ftp服務 web服務 一 ftp概述和搭建 1 ftp是一種應用層協議 採用c s結構設計,在傳輸層使用的是tcp的21 控制連線 與20 資料連線 2 搭建ftp站點 二 常用 ftp 服務端程式 1 iis windows server 2012 r2角色中的乙個可選角色服務 iis 元件主要...

SpringCloud服務調服務

org.springframework.cloud spring cloud starter feign enablefeignclients configuration public class mybatisplusconfig 資料許可權外掛程式 return datascopeinterce...