將hdfs資料匯入到hbase中的官方案例

2021-10-03 14:46:45 字數 648 閱讀 3287

首先我們在本地建立乙個檔案資料,資料中間是tab分隔符

[root@hdp-4 ~]# vi mrhbase.tsv 

1002 pear yellow

將資料put到hdfs上

[root@hdp-4 ~]# hadoop fs -put /root/mrhbase.tsv /
建立hbase表

hbase(main):016:0> create 'mrhbase','info'
執行mr到hbase的mrhbase表中,

-dimporttsv.columns=hbase_row_key,info:name,info:color mrhbase \

hdfs://hdp-1:9000/mrhbase.tsv

使用scan查詢結果

執行完之後如果bad lines=0,說明沒有匯入失敗資料,如果有數字顯示,則就有多少條資料匯入失敗

將資料從hbase匯入到hive

選定test0721表 hbase main 001 0 list table system.catalog system.function system.log system.mutex system.sequence system.stats test0721 7row s in 0.1500 ...

sqoop將oracle匯入到hbase經驗之談

之前公司有個專案,通過sqoop,將oracle的資料匯入到hbase。真個過程出現過很多問題,現在我將我匯入的過程跟遇到的問題和解決方法寫下來,希望能幫助大家 先測試sqoop是否能連線到oracle sqoop list tables connect jdbc oracle thin ip 15...

04 flume將資料匯入到Hbase

我們已經了解了使用flume監聽埠以及檔案內容,本節將展示使用flume匯入資料到hbase。進到hbase啟動目錄 cd root hbase 1.2.6 bin 啟動hbase服務 start hbase.sh 登入到hbase客戶端 hbase shell 在hbase命令列建立乙個表 hba...