python3爬虫初探(五)之从爬取到保存
生活随笔
收集整理的這篇文章主要介紹了
python3爬虫初探(五)之从爬取到保存
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
想一想,還是寫個(gè)完整的代碼,總結(jié)一下前面學(xué)的吧。
import requests import re# 獲取網(wǎng)頁(yè)源碼 url = 'http://www.ivsky.com/tupian/xiaohuangren_t21343/' data = requests.get(url).text#正則表達(dá)式三部曲 #<img src="http://img.ivsky.com/img/tupian/t/201411/01/xiaohuangren-009.jpg" width="135" height="135" alt="卑鄙的我小黃人圖片"> regex = r'<img src="(.*?.jpg)"'#匹配網(wǎng)址 pa = re.compile(regex)#轉(zhuǎn)為pattern對(duì)象 ma = re.findall(pa, data)#findall 方法找到所有的符合pa的對(duì)象,添加到一個(gè)列表中并返回 #print(ma)#圖片網(wǎng)址列表 print('本次爬取共獲取圖片'+str(len(ma))+'張')#列表長(zhǎng)度,即找到圖片個(gè)數(shù)i = 0#這里的i, 只是為了給圖片命名。。。 for imgurl in ma:i += 1print('正在爬取'+imgurl)imgdata = requests.get(imgurl).contentwith open(str(i)+'.jpg', 'wb') as f:f.write(imgdata)print('爬取完畢!')放幾張程序輸出的圖。
總結(jié)
以上是生活随笔為你收集整理的python3爬虫初探(五)之从爬取到保存的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: python3爬虫初探(四)之文件保存
- 下一篇: python3爬虫初探(六)之EXCEL