nutch配置成功

2021-08-30 16:01:59 字數 267 閱讀 8136

nutch配置成功,現在進行關鍵的技術選型。根據專案特殊情況及實現中文搜尋可能存在的問題,提出三套技術方案,除自己外,另安排一人選擇第三套方案進行實施測試,預期一周後進行根據測試情況選擇具體的實施方案。由自己負責第一套方案的測試,目前需進行的工作:

1、綜合比較nutch和heritrix,選擇合適的網路蜘蛛。

2、分析網路蜘蛛原始碼,找出**過濾功能及roboot協議控制功能模組,並做出適當修改。

3、分析lucene介面,尤其是中文分詞部分,並選擇合適的中文分詞開源介面。

Nutch 配置 可恥的失敗

滿以為萬事大吉了,誰想到乙個配置錯誤讓我木鑾了2 3個小時,當我配置好各種引數進行索引的時候,發現索引速度非常快,不到1分鐘就索引完畢了,不對啦,速度也不能這樣快啊,我們整個網路再說也有好幾百兆的東西,下來一看索引大小總共才3k多,我哭,怎麼回事,反正今天上午沒搞定,還延長了半個小時時間,後來回去,...

nutch1 9 nutch安裝記錄

nutch 安裝記錄 1.安裝windows下的linux模擬環境cygwin 3.在cygwin中進入nutch解壓縮目錄,使用命令cd cygdrive e nutch1.1 cygdrive是cygwin進入碟符的命令 4.執行bin nutch檢視是否可以成功執行 5.在nutch目錄下建立...

Linux下配置單機nutch1 2

1.準備 apache nutch 1.2 bin.tar.gz apache tomcat 7.0.22.tar.gz 2.步驟 1 解壓tar xzvf apache nutch 1.2 bin.tar.gz到指定目錄,本文為 home ncut 目錄下 原來 http a z0 9 my.do...