python爬虫保存图片到指定文件夹_李亚涛:python抓取某房源户型图并自动保存到文件夹...
大家好,今天來(lái)給大家分享一下如何抓取某房產(chǎn)網(wǎng)站房源戶型圖的所有圖片,而且自動(dòng)以房源名稱(chēng)命名一個(gè)文件夾,把所有圖片放到文件夾中。
大概的思路是:
1、獲取網(wǎng)頁(yè)源代碼
2、獲取圖片地址與房源名稱(chēng)
3、在當(dāng)前目錄,建立一個(gè)文件夾,以房源名稱(chēng)命名
4、保存圖片并簡(jiǎn)單對(duì)圖片進(jìn)行重命名
以下是全部代碼:
#coding:utf8
#python抓取網(wǎng)頁(yè)圖片并保存到本地電腦
import urllib2,re,os,time,sys,urllib
def save_img(url):
reload(sys)
sys.setdefaultencoding('utf8')
html=urllib2.urlopen(url).read()#獲取網(wǎng)頁(yè)源代碼
name=re.findall('【(.*?)戶型圖_長(zhǎng)沙.*?房型圖_小區(qū)照片_相冊(cè)',html)[0] #獲取小區(qū)名稱(chēng),為了下面建立一個(gè)文件夾做準(zhǔn)備
img_list_url=re.findall('data-index="\d+" src="(.*?)" />',html) #獲取所有需要圖片URL
cur_path=os.path.abspath(os.curdir) #獲取當(dāng)前目錄
glal_path=cur_path+'\\'+name.encode('gbk') #當(dāng)前目錄 name名稱(chēng)連接 生成一個(gè) 新的路徑 比如 :E:\python\test\某某小區(qū)
os.mkdir(glal_path) #創(chuàng)建一個(gè)文件夾
i=1 #定義一個(gè)i=1
for img_url in img_list_url:
urllib.urlretrieve(img_url,glal_path+'\\'+'%s.jpg'%str(i)) #保存圖片,img_url是圖片地址 后面參數(shù)是路徑與重新命名的圖片名稱(chēng)
i=i+1
if __name__ == '__main__':
url="xxx" #房源詳情URL地址
save_img(url)
代碼只是演示舉例,實(shí)現(xiàn)功能,具體不同網(wǎng)站匹配規(guī)則可能不同。
url地址就不公開(kāi)了,我用xxx代替了,就不公開(kāi)了,大家只是學(xué)習(xí)方法就可以,給大家一下看一下運(yùn)行效果如下:
大家可以看到運(yùn)行之后,生成了一個(gè)文件夾保利麓谷林語(yǔ)并且保存了8張圖片,再發(fā)張截圖如下:
好了,今天就分享這里,你學(xué)會(huì)了嗎?
李亞濤簡(jiǎn)介-一個(gè)沒(méi)有才華的python程序員,關(guān)注我學(xué)習(xí)更多python知識(shí)
總結(jié)
以上是生活随笔為你收集整理的python爬虫保存图片到指定文件夹_李亚涛:python抓取某房源户型图并自动保存到文件夹...的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: python 量化交易_Quantsra
- 下一篇: pythonsqlite视图_SQLit