senseidb中對zoie的整合

2021-09-01 11:09:51 字數 1335 閱讀 8800

com.senseidb.conf.senseiserverbuilder.buildcore()方法中開始對zoie進行例項化:

1 構建zoieconfig例項:

zoieconfig會設定analyzer, similarity例項,這些基本的lucene物件可以在sensei配置檔案中自定義。設定batchsize, batchdelay, maxbatthsize, rtindexing, skipbadrecord, freshness等屬性也是在sensei配置中可配的。

2. 構建senseizoiefactory

sensei自己實現了乙個預設的直譯器,實現了zoieindxableinterpreter(用於把dataprovider產生的dataevent轉換成lucene document)

呼叫constructzoiefactory方法建立senseizoiefactory例項:

private senseizoiefactory<?> constructzoiefactory(

zoieconfig zoieconfig,

list> facethandlers,

list> runtimefacethandle***ctories,

zoieindexableinterpreter interpreter)

3. 在例項化senseicore的時候,會傳遞senseizoiesystemfactory例項

senseicore在啟動的時候,會根據所在node的partition數量,建立相對應的indexdirecory,每個目錄,都有乙個zoie例項進行管理。

for (int part : _partitions)

所以在sensei.properties中指定的索引目錄只是乙個父目錄,sensei會根據nodeid和partitionid進行子目錄,子索引管理。

sensei會註冊每個zoie例項,通過jms進行通訊。

public void start() throws exception

if (!zoiesystems.contains(zoiesystem))

_reade***ctorymap.put(part, zoiesystem);

}try

logger.info("starting index manager...");

if (_indexmanager != null)

logger.info("index manager started...");

} catch (exception e)

_started = true;

}

關於Zoie的記憶體索引和硬碟索引

兩個索引是不一樣的,乙個是基於硬碟上的index.dic來開啟的索引 相當於lucene中基本的開啟索引資料夾得到的索引 乙個是直接在記憶體中的索引,搜尋時為保證完整性,會在兩個中都搜尋。但新增時只新增到記憶體索引中,因為效率的問題 在記憶體中操作事件極短 新增後會立刻重新讀入索引,以便新增後可以立...

陣列中的逆序對

來自劍指offer 分析 我們第一反應是順序掃瞄整個陣列,每掃瞄到乙個數字時,逐個比較該數字和它後面的數字的大小。如果後面的數字比它小,則這個兩個數字就組成了乙個逆序對。假設陣列有n個數字,由於每個數字都要和o n 個數字作比較,因此這個演算法的時間複雜度為o n 2 換思路 我們採用歸併思想,先考...

陣列中的逆序對

題目 在陣列中的兩個數字,如果前面乙個數字大於後面的數字,則這兩個數字組成乙個逆序對。輸入乙個陣列,求出這個陣列中的逆序對的總數。用歸併排序演算法,歸併的時候,從後向前歸併。include using namespace std int getreversenum int p1,int p2,int...