jieba庫的使用

2022-07-22 10:15:16 字數 1354 閱讀 8348

安裝jieba庫,在命令列中輸入以下語句就可以安裝,前提是安裝了python和pip

pip install jieba
jieba庫常用函式有四個,分別對應三種分詞模式和一種向詞庫新增新詞的功能

1、lcut(s)

精確模式,返回乙個列表型別的分詞結果,不存在冗餘詞

import jieba

str="世界那麼大,我想去看看"

s=jieba.lcut(str)

print(s)

執行結果:

['世界', '那麼', '大', ',', '我', '想', '去', '看看']
2、lcut(s,cut_all=true)

全模式,返回乙個列表型別分詞結果,存在冗餘。

import jieba

str="世界那麼大,我想去看看"

s=jieba.lcut(str,cut_all=true)

print(s)

執行結果:

['世界', '那麼', '大', ',', '我', '想去', '看看']
3、lcut_for_search(s)

搜尋引擎模式,返回乙個列表型別的分詞結果,存在肉哦能夠與。是在精確模式的基礎上,對長詞再次劃分

import jieba

str="世界那麼大,我想去看看"

s=jieba.lcut_for_search(str)

print(s)

執行結果:

['世界', '那麼', '大', ',', '我', '想', '去', '看看']
4、add_word(w)

向分詞詞典中新增新詞w

import jieba

str="世界那麼大,我想去看看"

s1=jieba.lcut(str)

print(s1) #新增分詞前的分詞效果

jieba.add_word('世界那麼')

s2=jieba.lcut(str)

print(s2) #新增分詞的後的分詞效果

執行結果:

['世界',『那麼', '大', ',', '我', '想', '去', '看看']

['世界那麼', '大', ',', '我','想','去', '看看']

jieba庫的使用

jieba是優秀的中文分詞第三方庫 中文文字需要通過分詞獲得單個的詞語 jieba是優秀的中文分詞第三方庫,需要額外安裝 jieba庫提供三種分詞模式,最簡單只需掌握乙個函式 cmd命令列 pip install jieba jieba分詞依靠中文詞庫 利用乙個中文詞庫,確定漢字之間的關聯概率 漢字...

jieba庫的使用

1.jieba庫概述 jieba是優秀的中文分詞第三方庫 2.jieba庫的安裝 cmd命令列 pip install jieba 3.jieba的分詞原理 4.jieba庫的使用 4.1 jieba分詞的的三種模式 4.2 jieba庫常用函式 詞頻統計例項 英文文字 哈姆雷特 英文版 要點 文字...

jieba庫的使用

如何安裝jieba?我們使用cmd命令輸入python m pip install jieba 等一段時間就下好了。jieba庫有啥用?就是將中文語句進行分詞 它有幾種模式 精確模式 全模式 搜尋引擎模式 精確模式 把文字精確地切分開,不存在冗餘單詞 全模式 把文字中所有可能的詞語都掃瞄出來,有冗餘...