weka 初练之 文本分类
生活随笔
收集整理的這篇文章主要介紹了
weka 初练之 文本分类
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
0.注意weka的中文編碼
RunWeka.ini-----》fileEncoding=utf-8
1.首先對分詞后的 無新詞發(fā)現(xiàn)的分詞文件,轉(zhuǎn)換成arff文件 命令
java weka.core.converters.TextDirectoryLoader -dir D:\weibo\catagory\data10W\nlpirSegment\noNI > D:\weibo\catagory\data10W\nlpirSegment\weka\wb10w.arff
發(fā)現(xiàn)轉(zhuǎn)換 特別快
2.打開上面的文件 進行生成詞向量,首先選擇 通過特征的有無,1000特征/每類文檔 ,最后保存當前文件 wb10w_vsm_true_false_weight.arff
生成6千多個特征
3.打開上面的arrf文件,進行特征選擇 ,評估策略選擇 IG,搜索策略選擇Ranker 特征數(shù)5000,保存文件wb10w_as_true_false_weight.arrf
4.bayes 分類器 66訓練數(shù)據(jù) 結(jié)果復(fù)制到 result文件中
轉(zhuǎn)載于:https://www.cnblogs.com/dasheng-maritime/p/6160403.html
創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎勵來咯,堅持創(chuàng)作打卡瓜分現(xiàn)金大獎總結(jié)
以上是生活随笔為你收集整理的weka 初练之 文本分类的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 对于Eclipse的正确用法
- 下一篇: 链接中获取文件名