本文主要從hdfs高可用架構組成、hdfs讀寫流程、如何保證可用性以及高頻面試題出發，提高大家對hdfs的認識，掌握一些高頻的hdfs面試題。
yarn是目前大資料領域最流行的資源管理及排程系統，你說你是做大資料的，但不知道yarn,這說不過去哈！這篇《yarn基礎篇》從yarn的基本架構組成、yarn通訊協議以及yarn資源排程流程這三個方面簡單剖析了yarn的基本原理！
要想掌握yarn核心，那yarn的資源排程器一定繞不開。本文從yarn的最核心的元件資源排程器(scheduler)出發，為大家深度解析yarn的排程機制，也會重點介紹capacity scheduler和fair scheduler兩種多使用者資源排程器的應用場景和設計原理；此外，還會介紹yarn常見的配置以及相關命令！
hbase 在大資料中有強大的毫秒級讀寫能力，適用於多種場景，這也是它為什麼能在大資料領域占有一席之地的原因。大資料面試中，hbase 是必考題！
在知道了 hbase 的基本架構與讀寫流程之後，配合 hbase 調優一起學習，相信你會對 hbase 有更深的理解！
這篇文章從 hbase 表結構設計、hbase 寫資料、hbase 讀資料三方面介紹了 hbase 的系統調優，以及講解了老生常談的資料傾斜問題及其常見的解決方案。乙個小白也能學會的 hbase 調優，相信你也沒有問題！
zookeeper英文翻譯過來的意思是：動物園管理員！在如今分布式盛行的情況下，各個大資料元件需要乙個元件管理它們，而大部分大資料元件都是以動物來命名的，因此就有了動物園管理員：zookeeper，它的地位也是不可替代！文章好不好我說了不算，由你們說了算，直接看下面的目錄：
2023年以來，雲原生、雲計算時代的趨勢已經在漸漸的鋪開了，這些都與 dokcer + k8s 兩個技術的盛行分不開，本文全面總結了 docker 學習筆記，足以讓你在面試中脫穎而出！
如果你是在校大學生，未來可能想考研深造，林哥寫的這份考研攻略，看了你一定會有幫助，最重要的是行動起來，學起來：
如果你本科不是計算機，想自學進入計算機行業，那這更是小林的強項了，關注我的讀者都知道，我本、碩都不是計算機專業的，自學轉行到計算機，有非常豐富的轉行經驗。這篇自學路線，你一定很需要：
書籍是最便宜的，但是它所蘊含的價值是無價的，小林認為，提公升自己的認知有 2 個方法：
第一是接近認知比你高的人，向他們學習；
第二便是讀書。
小林寫的三篇讀書心得，認真看完，你一定會有很大收穫！
在時代浪潮中，讀書或許短期內無法讓你有收穫，但它絕對是長期主義最好的一種方式。借用 stormzhang 張哥一句話：讀書是現在，收穫是未來！
編寫高質量Python的6個技巧
python內建了decimal模組，主要解決日常精度，預設提供了28個小數字進行數學計算。decimal中decimal 類解決了ieee 754浮點數產生的精度問題，並且可以進行更為準確捨入行為。所以我們在涉及重要場合比如貨幣金額計算情況，非常合適。當然我們也可以進行把小數轉化為整數計算，只是會...
資料競賽 高質量資料科學競賽平台彙總
1.kaggle 2.天池 3.datacastle 4.datafountain 5.科賽 kesci 6.biendata 7.華為雲 8.其它平台 jdata 京東大賽 圖靈聯邦 訊飛開放平台 flyai 螞蟻金服 tinymind 拍拍貸 睡前futurelab 只針對在校生 國外醫學影象相...
如何評估乙個類是否是高質量的？
你是否把程式中的類都看做是抽象資料型別了？是否從這個角度評估了它們的介面了？類是否有乙個中心目的？類的命名是否恰當？其名字是否表達了其中心目的？類的介面是否展現了一致的抽象？類的介面是否足夠抽象，使你能不必考慮它是如何實現其服務的？你能把類看作是黑盒了嗎？類提供的服務是否完整，能讓其他類無須動用其內...