英文文本分詞

1、知識準(zhǔn)備
（1）Python中的split()函數(shù)的用法
了解split()的基本用法

（2）python多個分割符split字符串
了解re庫的部分用法

Python strip() 方法用于移除字符串頭尾指定的字符（默認(rèn)為空格或換行符）或字符序列。

注意：該方法只能刪除開頭或是結(jié)尾的字符，不能刪除中間部分的字符。

2、實踐代碼
將英文句子分詞，并記錄通過字典的方式記錄每個詞語的出現(xiàn)頻數(shù)。

import retext="Today I will do what others won’t,\so tomorrow I can accomplish what others can’t. " array=re.split('[ ,.]',text) print(array)dic={} for i in array:if i not in dic:dic[i] = 1else:dic[i] += 1 print(dic)

3、實踐代碼結(jié)果

總結(jié)

以上是生活随笔為你收集整理的【Python】英文文本分词与词频统计（split()函数、re库）的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。