CRF中文分詞開源版發布啦

2021-08-30 20:20:36 字數 460 閱讀 3770

crf中文分詞開源版發布啦

[email protected]

中文分詞經過艱苦的研發,終於發布了。

中文分詞是網際網路應用不可缺少的基礎技術之一,也是語音和語言產品必不可少的技術元件。 自2023年第一屆國際中文分詞評測以來,由字構詞的分詞方法獲得了壓倒性優勢,國內主要通過crf++開源軟體包來學習該分詞方法,但是crf++過於複雜的**結構,導致了該演算法的普及率。

本次首先發布了crf中文分詞開源版[url]僅僅包含crf++軟體包中分詞解碼器部分,簡化了crf++複雜**結構,清除了分詞解碼器不需要的**,大大提高了分詞解碼器的可讀性和可懂度。同時為了方便學習者視覺化跟蹤和除錯**,在windows平台下分別建立了vc6.0和vs2008兩個工程檔案,使得vc6.0使用者和vs2008使用者都能輕玩轉中文分詞。

開源包中的分詞知識庫較小,分詞精度較低,僅供學習crf分詞演算法使用。後續將繼續發布更高精度和更高速度分詞引擎。

mmseg4j 中文分詞 1 5 版發布

經過幾天的開發與除錯,新版的 mmseg4j 可以發布了。定為1.5版,是因為變動比較大。mmseg4j 1.5變更 list 把chars.dic檔案放到jar裡,我們不需要關心它,當然你在詞庫目錄放這個檔案可能覆蓋它。最長匹配遍歷調整 基本不受長詞的影響 優化了程式,除去沒有必要的陣列複製等,效...

ShootSearch中文分詞Web版

shootsearch 分詞元件 c 開源 技術支援 support shootsoft.net 分詞演算法 詞庫 最大匹配 詞庫來自www.jesoft.cn,已經過一定的修改 使用說明 先載入詞庫,再進行分詞.分詞過程過載兩次 支援回車的和不支援回車的,注意選擇 可以手動新增詞語到sdict.t...

赤兔Android資料恢復專業版發布啦

赤兔aandroid資料恢復軟體專業版今天發布啦 新版本功能更強大 新版本可以恢復所有安卓系統下的手機資料恢復 只要你的手機系統是安卓,只要你有手機資料恢復的需要,都可以試用我們的軟體,簡訊 通訊錄恢復輕鬆搞定 下面我們就來看看新版本有哪些強大的功能吧 產品特色介紹 1.通殺所有android版本,...