lee
2023-11-08 22:48老師好，stemming是詞干提取吧 lemmatization是詞形還原吧？
所屬：CFA Level II > Quantitative Methods 視頻位置 相關(guān)試題
來(lái)源： 視頻位置 相關(guān)試題
1個(gè)回答
愛(ài)吃草莓的葡萄助教
2023-11-09 17:57
該回答已被題主采納
同學(xué)你好。lemmatization是詞形還原，也稱(chēng)為詞干提取；stemming有很多不同意思，結(jié)合該處語(yǔ)境為詞根提取技術(shù)。由于這兩個(gè)單詞單獨(dú)來(lái)看意思比較相近，建議同學(xué)就默認(rèn)stemming為詞干提取，lemmatization為詞形還原，下面是兩者的解釋?zhuān)梢越Y(jié)合具體意思理解這兩者的區(qū)別：
1）lemmatization為詞形還原，是指將單詞還原為其基本形式的過(guò)程。它通常涉及使用詞典或語(yǔ)言模型來(lái)確定單詞的基本形式，可以更好地保留詞匯的意義信息，更智能、準(zhǔn)確地識(shí)別出單詞的原始形式，適合用于具有復(fù)雜形態(tài)變化的語(yǔ)言如英語(yǔ)等。
2）stemming為詞干提取，是通過(guò)簡(jiǎn)單的算法將詞尾部分去掉以得到詞根的形式，是一種較為粗糙的方法，可能導(dǎo)致非預(yù)期的結(jié)果，在很多情況下無(wú)法正確提取詞根。
0
0
0
0
