每天一點點，記錄學習

近期爬蟲項目，看完請點贊哦～～～：

1:python 爬取菜鳥教程python100題，百度貼吧圖片反爬蟲下載，批量下載

2:python爬蟲爬取百度貼吧圖片，requests方法

3:python 爬蟲爬取百度貼吧圖片 urllib.request.urlretrieve圖片批量下載函數

python爬蟲爬取百度貼吧圖片，requests方法
知識點：反爬蟲
1:仍然是找到該圖片的http鏈接，復制到新窗口，找到user-agent

找到user-agent，將user-agent后邊的內容全部復制

#反爬蟲 headers = {'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36'}

全部代碼如下：

import requests from lxml import etree url = 'https://tieba.baidu.com/p/5815297430' #反爬蟲 headers = {'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36'} response = requests.get(url) data = response.content.decode('utf-8')#解析 html = etree.HTML(data) img = html.xpath('//img[@class="BDE_Image"]/@src') a = 1 for i in img:res = requests.get(i,headers = headers)img_data = res.content #只能轉換為字節流才能下載圖片with open ('/Users/你的路徑/百度貼吧圖片批量下載/{}.jpg'.format(a),'wb') as f:f.write(img_data)print('第%d張圖片已下載完成'%a)a += 1

復制即可用，還有用批量圖片下載函數爬取圖片的方法，鏈接?批量下載圖片

總結

以上是生活随笔為你收集整理的python爬虫爬取百度贴吧图片，requests方法的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。