注：本文和hive配置沒有關係
現實問題：
1.線下的沒有安裝hive
2.要測試的資料只有線上的hive庫里有
3.從線上的hive庫到線下的hive庫匯出比較麻煩
4.**執行hive查詢的時間較長
因為時間較長，每次修改程式重跑的時候都會耽誤我們大量的時間，因此解決辦法是：
1.在第一次執行程式的時候，將hive的查詢結果列印出來
2.將結果賦給hive查詢的結果集
3.注釋掉hive查詢語句
由此每次 除錯程式的時候 就不需要去查詢hive資料庫了 節約了大量的時間
剛開始太笨了，測試了十多次才想到這個辦法，這問題把我折騰的都要吐了 跪了 ndyd
hive 優化策略
explain 解釋執行計畫 通過explain命令，可以檢視hive語句的操作情況，是否為慢查詢，是否走索引，一目了然 explain select sum from table name 動態分割槽調整 hive.exec.dynamic.partition.mode strict 預設是str...
線上版本灰度發布策略
從接觸運維開始，最苦逼的事情就是業務上線，為什麼這麼說？就是因為有了很多的大坑隊友。不是因為開發的童鞋漏提 就是因為測試童鞋線下測試的不到位導致 扔到線上後出現各種問題，各種404。近期和各位童鞋研究了應對這種現象的解決方案，得到了如下結果 上線分為如下幾種等級 測試發布 預發布 灰度發布 正式發布...
Hive 實戰優化策略
2018 06 14更新 更新8 hive 在大資料執行時，真的是很慢，跑一張表經常就是跑幾個小時，一天下來跑不了幾張表，通過一段時間學習，總結幾個常用的hive 優化方法，希望對新手有點幫助，我也是新手，部落格存在問題的地方，請大家批評指正，共同學習 進步，謝謝！hive f 路徑 filenam...