mllib是spark的機器學習庫。提供了利用spark構建大規模和易用性的機器學習平台，元件：
五大特性：
5-工具：包括線性代數、統計學、資料處理科學
注意:
spark ml基於dataframe的apispark mllib基於rdd的api(2.0開始處於維護模式,將被淘汰)
spark的各種資料結構:
為什麼sparkmllib需要從rdd轉變成dataframe？
從架構圖可以看出mllib主要包含三個部分：
mllib演算法庫的核心內容：
mllib由一些通用的學習演算法和工具組成，包括分類、回歸、聚類、協同過濾、降維等，同時還包括底層的優化原語和高層的管道api。
Hbase原理與架構
1 client向hregionserver傳送寫請求。2 hregionserver將資料寫到hlog write ahead log 為了資料的持久化和恢復。3 hregionserver將資料寫到記憶體 memstore 4 反饋client寫成功。1 當memstore資料達到閾值 預設是1...
KVM架構與原理詳解
1.kvm架構 kvm基本結構有2個部分構成 kvm 驅動，現在已經是linux kernel的乙個模組了。其主要負責虛擬機器的建立，虛擬記憶體的分配，vcpu暫存器的讀寫以及vcpu的執行。另個組成是qemu，用於模擬虛擬機器的使用者空間元件，提供i o裝置模型，訪問外設的途徑。圖1 kvm基本結...
Tomcat工作原理與架構
tomcat檔案目錄 bin tomcat執行所需要的一些指令碼和jar包 conf tomcat的配置檔案 lib 存放 tomcat 伺服器和所有 web 應用程式需要訪問的 jar 檔案 logs 存放日誌 temp 存放 tomcat 執行時產生的臨時檔案 work tomcat 將 jsp...