在使用hive建表載入資料時，如果是乙個分割槽，那麼用alter table mytable add if not exists partition(p1='p1') location 'hdfs://***' 或者直接用msck repair table mytable都可以將指定目錄的資料載入到分割槽
但是對於多級目錄來說，比如
這種結構，如果建立表的時候分割槽為year,month,day,那麼 可以用add partition 方式是可以載入資料到指定分割槽，但是msck會報錯，主要原因是msck必須要目錄結構滿足：
/partition_name=partition_value/
且不能包含特殊字元
當多級目錄時，這時候會有/特殊字元，那麼可設定hive.msck.path.validation為skip或者ignore 就可以了
set hive.msck.path.validation = ignore
Hive shell指令碼自動載入分割槽資料
業務場景 每天都有日誌而且每小時都有日誌，將日誌按照小時儲存 acccess log 20190528 2019052800.log 2019052801.log 2019052802.log bin bash yesterday date d 1 days y m d access log dir...
hive資料載入
一.需要注意的問題 1.hive不支援行級別的增刪改 2.使用overwrite會覆蓋表的原有資料,into則是追加。3.local會將本地檔案系統複製乙份再上傳至指定目錄，無local只是將本地檔案系統上的資料移動到指定目錄。4.若目錄指向hdfs上的資料則執行的是move操作。5.分隔符要與資料...
大資料Hive分割槽
hive組織表到分割槽。它是將乙個表到基於分割槽列，如日期，城市和部門的值相關方式。使用分割槽，很容易對資料進行部分查詢。表或分割槽是細分成桶，以提供額外的結構，可以使用更高效的查詢的資料。桶的工作是基於表的一些列的雜湊函式值。例如，乙個名為tab1表包含雇員資料，如 id,name,dept 和y...