基于Python實現(xiàn)的死鏈接自動化檢測工具

?

by:授客 QQ：1033553122

測試環(huán)境：

win7

python 3.3.2

chardet 2.3.0

?

腳本作用：

檢測系統(tǒng)中訪問異常(請求返回code值非200)的鏈接

?

使用方法：

1. 配置

編輯deadLinkDetection\conf\init.conf

?

配置項如下

protocol：協(xié)議，比如https, http

host：主機(jī)、域名，如192.168.1.3

port：端口號,比如 80， 8080， 443

username：配置登錄用戶名

password：配置登錄密碼

2.配置種子url

編輯conf/urlNoLogin.txt文件中填寫不需要登錄就可訪問的種子url,格式如下,每行一條url路徑

/
/doc/sadmin.html/
/doc/refman/5.7/en/statement-optimization.html
/doc/homepage.html

在conf/urlNeedLogin.txt文件中填寫需要登錄才可訪問的種子url,格式同上
?

3. 根據(jù)項目實際情況，修改main.py中login_system函數(shù)，實現(xiàn)登錄系統(tǒng)

?

4. 運(yùn)行程序

cmd 進(jìn)入到deadLinkDetection目錄，運(yùn)行 python main.py

?

5. 查看運(yùn)行結(jié)果

除了控制臺打印的輸出，默認(rèn)的，還會在d:\\目錄下，生成filepath_of_urls_visited.txt, d:/filepath_of_urls_in_trouble.txt文件，

分別存放成功訪問過的url鏈接，和訪問異常的鏈接，可在main.py中找到代碼行“reptile = Reptile()”，顯示指定要生成的文件，如下：

reptile = Reptile('d:/xxxxx_visited.txt', 'd:/xxxxx_in_trouble.txt)

?

使用限制：

登錄系統(tǒng)函數(shù)無法通用，需要自己實現(xiàn)

?

源碼下載地址：基于Python實現(xiàn)的死鏈接自動化檢測工具.zip

?

?

轉(zhuǎn)載于:https://www.cnblogs.com/shouke/p/10157572.html

總結(jié)

以上是生活随笔為你收集整理的基于Python实现的死链接自动化检测工具的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。