LTP與jieba詞性標註對比

2021-09-03 01:14:00 字數 3273 閱讀 7281

ltp 使用的是863詞性標註集,其各個詞性含義如下表。

tagdescription

example

tagdescription

example

aadjective

美麗ni

organization name

保險公司

bother noun-modifier

大型, 西式

nllocation noun城郊c

conjunction

和, 雖然

nsgeographical name北京d

adverb很nt

temporal noun

近日, 明代

eexclamation哎nz

other proper noun

諾貝爾獎

gmorpheme

茨, 甥

oonomatopoeia嘩啦h

prefix

阿, 偽

ppreposition

在, 把

iidiom

百花齊放

qquantity個j

abbreviation

公檢法r

pronoun我們k

suffix

界, 率

uauxiliary

的, 地

mnumber

一, 第一

vverb

跑, 學習

ngeneral noun

蘋果wp

punctuation

,。!nd

direction noun

右側ws

foreign words

cpunh

person name

杜甫, 湯姆

xnon-lexeme

萄, 翱

zdescriptive words

瑟瑟,匆匆

jieba為自然語言語言中常用工具包,jieba具有對分詞的詞性進行標註的功能。jieba分詞使用ictclas 漢語詞性標註集,詞性類別如下:

ag

形語素形容詞性語素。形容詞**為 a,語素**g前面置以a。

a

形容詞取英語形容詞 adjective的第1個字母。

ad

副形詞直接作狀語的形容詞。形容詞** a和副詞**d並在一起。

an

名形詞具有名詞功能的形容詞。形容詞** a和名詞**n並在一起。

b

區別詞取漢字「別」的聲母。

c連詞

取英語連詞 conjunction的第1個字母。

dg

副語素副詞性語素。副詞**為 d,語素**g前面置以d。

d副詞

取 adverb的第2個字母,因其第1個字母已用於形容詞。

e嘆詞

取英語嘆詞 exclamation的第1個字母。

f

方位詞取漢字「方」g

語素絕大多數語素都能作為合成詞的「詞根」,取漢字「根」的聲母。h

前接成分

取英語 head的第1個字母。i

成語取英語成語 idiom的第1個字母。j

簡稱略語

取漢字「簡」的聲母。k

後接成分

l

習用語習用語尚未成為成語,有點「臨時性」,取「臨」的聲母。

m數詞

取英語 numeral的第3個字母,n,u已有他用。

ng

名語素名詞性語素。名詞**為 n,語素**g前面置以n。

n名詞

取英語名詞 noun的第1個字母。

nr人名

名詞** n和「人(ren)」的聲母並在一起。

ns地名

名詞** n和處所詞**s並在一起。

nt

機構團體

「團」的聲母為 t,名詞**n和t並在一起。

nz

其他專名

「專」的聲母的第 1個字母為z,名詞**n和z並在一起。

o

擬聲詞取英語擬聲詞 onomatopoeia的第1個字母。

p介詞

取英語介詞 prepositional的第1個字母。

q量詞

取英語 quantity的第1個字母。

r代詞

取英語代詞 pronoun的第2個字母,因p已用於介詞。

s

處所詞取英語 space的第1個字母。

tg

時語素時間詞性語素。時間詞**為 t,在語素的**g前面置以t。

t

時間詞取英語 time的第1個字母。u

助詞取英語助詞 auxiliary

vg

動語素動詞性語素。動詞**為 v。在語素的**g前面置以v。v

動詞取英語動詞 verb的第乙個字母。

vd

副動詞直接作狀語的動詞。動詞和副詞的**並在一起。

vn

名動詞指具有名詞功能的動詞。動詞和名詞的**並在一起。

w

標點符號x

非語素字

非語素字只是乙個符號,字母 x通常用於代表未知數、符號。

y

語氣詞取漢字「語」的聲母。

z

狀態詞取漢字「狀」的聲母的前乙個字母。

un

未知詞不可識別詞及使用者自定義詞組。取英文unkonwn首兩個字母。(非北大標準,csw分詞中定義)

參考資料

2.

LTP詞性標註

a adjective 形容詞 美麗 b other noun modifier 其他的修飾名詞 大型,西式 c conjunction 連詞 和,雖然 d adverb 副詞 很 e exclamation 感嘆詞 哎 g morpheme 茨,甥 h prefix 字首 阿,偽 i idiom ...

LTP 詞性標註

tag description example a adjective 形容詞 美麗 b other noun modifier 其他的修飾名詞 大型,西式 c conjunction 連詞 和,雖然 d adverb 副詞 很 e exclamation 感嘆詞 哎 g morpheme 茨,甥 ...

jieba詞性標註

ag 形語素形容詞性語素。形容詞 為a,語素 前面置以a。a形容詞 取英語形容詞adjective的第1個字母。ad副形詞 直接作狀語的形容詞。形容詞 a和副詞 d並在一起。an名形詞 具有名詞功能的形容詞。形容詞 a和名詞 n並在一起。b區別詞 取漢字 別 的聲母。c連詞 取英語連詞conjunc...