Hive 操作與應用

2022-07-11 06:33:08 字數 978 閱讀 9414

一、hive用本地檔案進行詞頻統計

1.準備本地txt檔案 

2.啟動hadoop,啟動hive

3.建立資料庫,建立文字表 

4.對映本地檔案的資料到文字表中

5.hql語句進行詞頻統計交將結果儲存到結果表中。

6.檢視統計結果

二、hive用hdfs上的檔案進行詞頻統計

1.準備電子書或其它大的文字檔案

2.將文字檔案上傳到hdfs上

3.建立文字表

4.對映hdfs中的檔案資料到文字表中

5.hql語句進行詞頻統計交將結果儲存到結果表中

6.檢視統計結果

hive基本操作與應用

通過hadoop上的hive完成wordcount 啟動hadoop start all.sh hdfs上建立資料夾 hdfs dfs mkdir input hdfs dfs ls user hadoop 上傳檔案至hdfs hdfs dfs put test.txt input hdfs dfs...

hive基本操作與應用

通過hadoop上的hive完成wordcount 1.啟動hadoop 2.hdfs上建立資料夾 先建立user 之後建立hadoop 之後建立wcinput,之後檢視目錄 3.上傳檔案至hdfs 首先建立並編輯要上傳的檔案,我的是159.txt.4.啟動hive 5.建立原始文件表 6.匯入檔案...

hive基本操作與應用

通過hadoop上的hive完成wordcount 啟動hadoop start all.sh hdfs上建立資料夾 hdfs dfs mkdir wcinput hdfs dfs ls user hadoop 上傳檔案至hdfs hdfs dfs put dj.txt wcinput hdfs d...