Sqoop 操作筆記

2021-07-11 05:25:10 字數 624 閱讀 9413

url :sqoop安裝配置

sqoop執行select語句mysql匯入hdfs

sqoop import-all-tables 匯出指定庫的所有table表

--query:執行sql語句查詢滿足結果則匯出

--splis-byid:排序

--target-dir:指定匯出到hdfs上的路徑

-m:指定啟動的map數量

--null-string:當從資料匯出資料出現null值的時候,如果是string型別則替換成 '' 使用方法:--null-string ''

--null-non-string:出現的null不是string型別的

--columns 指定匯入匯出某列

hdfs資料匯入到mysql

--fields-teminated-by:資料來源的分隔符

--export-dir:指定資料儲存在hdfs上的位置

在操作中遇到的bug

mysql匯出到hdfs出現api問題程式沒有執行

hdfs匯入到mysql出現中文字元亂碼

以後將更新

sqoop <---------->hive 

sqoop匯入表/資料到hive

hbase oracle

vi 操作筆記

1.關於退出 wq 強制儲存退出 wq 儲存退出 x 作用和 wq 一樣 zz 作用和 wq一樣,注意z是大寫的,並且不是在命令模式 q 退出 q 強制退出 2.關於移動 h 在當前行向左移動乙個字元 j 移動到下一行 k 移動到上一行 l 在當前行向右移動乙個字元 ctrl f 向前滾動一頁 ct...

mysql操作筆記

user01只能本地訪問 create user user01 localhost identified by password1 user02可以遠端訪問 create user user02 identified by password1 建立資料庫 create database db01 修...

mysql操作筆記

一 select user 顯示的為當前使用的 user 及host use mysql select distinct user from user 顯示該資料庫授權登陸的使用者名稱 其實還有 host 的限制 mysql 中新增使用者 新建資料庫 使用者授權 刪除使用者 修改密碼 注意每行後邊都...