Python以其清晰簡潔的語法、易用和可擴(kuò)展性以及豐富龐大的庫深受廣大開發(fā)者喜愛。其內(nèi)置的非常強(qiáng)大的機(jī)器學(xué)習(xí)代碼庫和數(shù)學(xué)庫，使Python理所當(dāng)然成為自然語言處理的開發(fā)利器。

?

那么使用Python進(jìn)行自然語言處理，要是不知道這8個(gè)工具就真的Out了。

?

NLTK

?

?

?

NLTK是使用Python處理語言數(shù)據(jù)的領(lǐng)先平臺。它為像WordNet這樣的詞匯資源提供了簡便易用的界面。它還具有為文本分類(classification)、文本標(biāo)記(tokenization)、詞干提取(stemming)、詞性標(biāo)記(tagging)、語義分析(parsing)和語義推理(semantic reasoning)準(zhǔn)備的文本處理庫。

Pattern

?

Pattern具有用于詞性標(biāo)注(part-of-speech taggers)、n-gram搜索、情感分析和WordNet的一系列工具。它還支持矢量空間建模、聚類分析以及支持向量機(jī)。

?

TextBlob

?

TextBlob是處理文本數(shù)據(jù)的一個(gè)Python庫。它為深入挖掘常規(guī)自然語言處理提供簡單易用的API，例如詞性標(biāo)注(part-of-speech tagging)、名詞短語提取(noun phrase extraction)、情感分析、文本分類、機(jī)器翻譯等等。

?

Gensim

?

Gensim是一個(gè)用于主題建模、文檔索引以及使用大規(guī)模語料數(shù)據(jù)的相似性檢索。相比于RAM，它能處理更多的輸入數(shù)據(jù)。作者稱它是“根據(jù)純文本進(jìn)行非監(jiān)督性建模最健壯、最有效的、最讓人放心的軟件”。

?

PyNLPl

?

PyNLPl:Python Natural Language Processing Library（發(fā)音為：pineapple）是一個(gè)用于自然語言處理的Python庫。它由一系列的相互獨(dú)立或相互松散獨(dú)立的模塊構(gòu)成，用于處理常規(guī)或不太常規(guī)的NLP任務(wù)。PyNLPl可用于n-gram計(jì)算、頻率列表和分布、語言建模。除此之外，還有更加復(fù)雜的數(shù)據(jù)模型，例如優(yōu)先級隊(duì)列；還有搜索引擎，例如波束搜索。

?

spaCy

?

spaCy是一個(gè)商業(yè)化開源軟件，是使用Python和Cython進(jìn)行工業(yè)級自然語言處理的軟件。它是目前最快的、水平最高的自然語言處理工具。

?

Polyglot

?

Polyglot是一個(gè)支持海量多語言的自然語言處理工具。它支持多達(dá)165種語言的文本標(biāo)記，196種語言的語言檢測，40種語言的命名實(shí)體識別，16種語言的詞性標(biāo)注，136種語言的情感分析，137種語言的字根嵌入，135種語言的形態(tài)分析以及69種語言的音譯。

?

MontyLingua

?

MontyLingua是一個(gè)免費(fèi)的、常識豐富的、端對端的英語自然語言理解軟件。用戶只需要將原始英文文本輸入MontyLingua，就能輸出文本的語義解釋。該軟件完美適用于信息提取、需求處理以及問答。從給定的英語文本，它能提取主語/動(dòng)詞/形容詞對象元組、名詞短語和動(dòng)詞短語，并提取人的名字、地點(diǎn)、事件、日期和時(shí)間，以及其他語義信息。

?

作者：董志南

來源：NLP自然語言處理

?

?

▼

?

?

轉(zhuǎn)載自：http://mp.weixin.qq.com/s?__biz=MzAwNDc0MTUxMw==&mid=2649638920&idx=1&sn=1b62850ea3dec2401a6a3f61e946de38&scene=0#rd

轉(zhuǎn)載于:https://www.cnblogs.com/1394htw/p/5482241.html

總結(jié)

以上是生活随笔為你收集整理的用Python做自然语言处理必知的八个工具【转载】的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。