HBase全網最佳學習資料彙總

2021-09-25 16:30:11 字數 2182 閱讀 3627

前言

hbase這幾年在國內使用的越來越廣泛,在一定規模的企業中幾乎是必備儲存引擎,網際網路企業阿里巴巴、京東、小公尺都有數千台的hbase集群,中國電信的話單、中國人壽的保單都是儲存在hbase中。注意大公司有數十個數百個hbase集群,此點跟hadoop集群很不相同。另外,資料需求,很多公司是mysql+hbase+hadoop(spark),滿足關係型資料庫需求,滿足大規模結構化儲存需求,滿足複雜分析的需求。如此流行的原因**於很多方面,如:

跟hadoop深度結合:本就同根同源,在資料儲存在hbase後,如果想複雜分析,則非常方便

高擴充套件、高容量、高效能、低成本、低延遲、稀疏寬表、動態列、ttl、多版本等最為關鍵,起源google**,發揚社群及廣大網際網路公司,設計之初就是為儲存網際網路,後經過多年的改進公升級,如今已經是結構化儲存的事實標準

最好買紙質書籍,集中時間看下

hbase權威指南(hbase: the definitive guide):理論多一些

hbase實戰:實踐多一些

總結性

hbase2.0: hbase2.0 :預計今年會發布,hbase2.0是革命性的版本

hbase phoenix:apache phoenix與hbase:hbase之上sql的過去,現在和未來

社群hbase部落格:

方**

學術界關於hbase應用場景(物聯網/車聯網/交通/電力等)研究大全: hbase在網際網路領域有廣泛的應用,比如:網際網路的訊息系統的儲存、訂單的儲存、搜尋原材料的儲存、使用者畫像資料的儲存等。得益於hbase海量的儲存量及超高併發寫入讀取量。hbase在09年就開始在工業界大範圍使用,在學術界,也有非常多的高校、機構在研究hbase應用於不同的行業,本文主要梳理下這些資料(主要是中文資料,有一些是碩士**期刊),這些很多都在工業界使用了。

hbase使用場景和成功案例 儲存網際網路的初心不變

一種基於物聯網大資料的裝置資訊採集系統及方法:怎麼使用hbase、sparkstreaming、redis處理物聯網大資料

一種基於hbase的智慧型電網時序大資料處理方方案:一種基於hbase的智慧型電網時序大資料處理方方案

hbase配合geohash演算法支援經緯度:此文主要講geohash演算法的

基於hbase的海量gis資料分布式處理實踐:設計了一種基於分布式資料庫hbase的gis資料管理系統。系統優化了柵格資料的生成和儲存過程,將海量柵格資料直接寫入hbase儲存、索引。同時,針對向量空間資料的儲存、索引與檢索,提出了一種新的rowkey設計,既考慮經緯度,又考慮空間資料型別和屬性,使得在按空間位置檢索向量地理資訊時,能通過hbase的rowkey迅速定位需要返回的資料。在hbase的集群環境上用真實gis資料對上述方法進行了驗證,結果表明,提出的系統具有較高的海量資料儲存和檢索效能,實現了海量地理資訊資料的高效儲存和實時高速檢索。

基於hbase的金融時序資料儲存系統:金融類時序資料的儲存方案,寫的還是結合實際場景的。

各大公司的實踐

阿里巴巴-大資料時代的結構化儲存hbase在阿里的應用實踐:講述在阿里巴巴集團的實踐,hbase在阿里集團已經10000臺左右,主要在訂單、監控、風控、訊息、大資料計算等領域使用

滴滴-hbase在滴滴出行的應用場景和最佳實踐:統計結果、報表類資料、原始事實類資料、中間結果資料、線上系統的備份資料的一些應用

hbase在京東的實踐 :跟阿里一樣,京東各個業務線使用了hbase,如:風控、訂單、商品評價等

中國人壽基於hbase的企業級大資料平台:使用乙個大跨表儲存所有的保單,hbase寬表的實踐

hbase在hulu的使用和實踐:使用者畫像、訂單儲存系統、日誌儲存系統的使用

apache hbase at netease:在報表、監控、日誌類業務、訊息類業務、推薦類業務、風控類業務有所使用,另外講述了一些優化的點。

10 million smart meter data with apache hbase:講述hitachi為什麼選擇hbase及在hbase方面的應用

hbase資料庫

hbase:

知乎hbase討論:

hbase中文社群:www.hbase.group

csdn hbase資料庫:

結尾

這些資料是筆者整理,以供有大規模結構化需求的使用者及hbase愛好者學習交流,以使用hbase更好的解決實際的問題。

HBase全網最佳學習資料彙總

hbase這幾年在國內使用的越來越廣泛,在一定規模的企業中幾乎是必備儲存引擎,網際網路企業阿里巴巴 京東 小公尺都有數千台的hbase集群,中國電信的話單 中國人壽的保單都是儲存在hbase中。注意大公司有數十個數百個hbase集群,此點跟hadoop集群很不相同。另外,資料需求,很多公司是mysq...

學習資料彙總

unity官方 unity模型連斬 lol美術資源提取 鋼琴 圖形學教程 人工智慧教程 黑馬python教程 人工智慧python大資料基礎 unity 多鏡頭分鏡攻擊效果的實現 pr教程1 pr教程2 ae c4d教程 ar室內導航地圖外掛程式 ar gps 在unity中程式化生成的地牢環境 利...

偽分布式hbase資料遷移彙總

hbase0.94.11 hadoop為1.1.2,此電腦ip為172.19.32.128 向hbase1.1.2 hadoop為2.6.5,此電腦ip為172.19.32.118 資料遷移.第一步 首先必須關閉防火牆。sudo ufw enable sudo ufw disable sudo uf...