NN和2NN工作機制

2021-10-19 08:19:02 字數 806 閱讀 2481

nn和2nn工作機制

1.第一階段:namenode啟動

(1)第一次啟動namenode格式化後,建立fsimage和edits檔案。如果不是第一次啟動,直接載入編輯日誌和映象檔案到記憶體。

(2)客戶端對元資料進行增刪改的請求。

(3)namenode記錄操作日誌,更新滾動日誌。

(4)namenode在記憶體中對資料進行增刪改。

2.第二階段:secondary namenode工作

(1)secondary namenode詢問namenode是否需要cheekpoint。直接帶回namenode檢查結果。

(2)secondary namenode請求執行cheekpoint.

(3)namenode滾動正在寫的edits日誌。

(4)將滾動前的編輯日誌和映象檔案拷貝到secondary namenode。

(5)secondary namenode載入編輯日誌和映象檔案到記憶體,病合併。

(6)生成新的映象檔案fsimage.chkpoint.

(7)拷貝fsimage.chkpoint到namenode.

(8)namenode將fsimage.chkpoint重新命名成fsimage。

nn和2nn工作機制詳解

fsimage:namenode 記憶體中元資料序列化後形成的檔案。

edits:記錄客戶端更新元資料資訊的每一步操作(可通過 edits 運算出元資料)。

name

opencv中特徵匹配的2NN演算法

前言 在提取了影象的特徵點,並形成特徵描述子後,我們往往需要對兩張 本質上是兩個mat 進行特徵點匹配 opencv提供的匹配方法有兩種,分別是flann以及暴力匹配。暴力匹配思路最為簡單,就是圖1的乙個特徵描述子a,與圖2的所有特徵描述子均進行一次距離計算 一般為歐氏距離 距離最小的點即為a點在圖...

SIFT特徵檢測 最近鄰近似匹配 2NN優化

import math from matplotlib import pyplot as plt import matplotlib matplotlib inline book l cv2.imread images book l.png book r cv2.imread images book...

cs231n 筆記02 反向傳播與2 NN示例

反向傳播鏈式計算梯度。sigmoid函式將實數壓縮到 0,1 tanh函式將實數壓縮到 1,1 relu函式 優點 梯度下降收斂巨大加速。缺點 如果學習率設定得太快,可能會發現網路中40 神經元不被啟用。改進 leaky relu。x 0時,y接近0。maxout是relu與leaky relu的一...