python爬取网页有乱码怎么解决_Python爬取网页requests乱码
**之前有在裁判文書上爬取數(shù)據(jù),這段時(shí)間重新運(yùn)行爬蟲后發(fā)現(xiàn)無(wú)法獲取網(wǎng)頁(yè)數(shù)據(jù),
找了一下發(fā)現(xiàn)requests網(wǎng)頁(yè)源碼返回的是亂碼**
(如下截取一部分返回的數(shù)據(jù):
不知道是不是網(wǎng)站對(duì)網(wǎng)頁(yè)內(nèi)容進(jìn)行了加密,請(qǐng)問(wèn)如何解決這個(gè)問(wèn)題?謝謝!
截取部分程序源碼:
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.104 Safari/537.36',
'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
'Accept-Language': 'zh-TW,zh;q=0.8,en-US;q=0.6,en;q=0.4',
'Accept-Encoding': 'gzip, deflate',
'Connection': 'keep-alive',
'Content-Type': 'text/html; charset=utf-8'}
html = requests.post('http://wenshu.court.gov.cn/List/ListContent', data=data, headers=headers)
print(html.text)
但是在審查元素里返回應(yīng)該返回的數(shù)據(jù),請(qǐng)問(wèn)這哪里出現(xiàn)了問(wèn)題?
之前程序正常運(yùn)行時(shí)返回的數(shù)據(jù)是這樣的:
創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎(jiǎng)勵(lì)來(lái)咯,堅(jiān)持創(chuàng)作打卡瓜分現(xiàn)金大獎(jiǎng)總結(jié)
以上是生活随笔為你收集整理的python爬取网页有乱码怎么解决_Python爬取网页requests乱码的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: echars显示折点数据_数据可视化的基
- 下一篇: python深浅拷贝 面试_Python