python之简单爬虫(爬取豆瓣出版社)
生活随笔
收集整理的這篇文章主要介紹了
python之简单爬虫(爬取豆瓣出版社)
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
環境準備:
1.python 3.0+
2.豆瓣出版社網址 https://read.douban.com/provider/all
ok,開始我們的實驗
1.打開瀏覽器,輸入網址,右擊網頁,查看網頁源碼,這里我用的是谷歌瀏覽器
2.看上圖我們發現許多出版社名稱,接下來我們查找一個出版社名稱,例如重慶大學
觀察下圖我們發現它們都在一個div標簽內,且class=”name” ,所以,我們開始編寫代碼
3.代碼
import urllib.request import re import os url = "https://read.douban.com/provider/all" #獲取url pat = '<div class="name">(.*?)</div>' #匹配規則 data = urllib.request.urlopen(url).read().decode("utf-8") #讀取網頁的內容并解碼 relut = re.compile(pat).findall(data) #會返回一個列表 file = open(r"C:\Users\123\豆瓣出版社.txt", "w", encoding="utf-8") #這里我定義了一個自己的存儲路徑,大家可以根據自己的路徑修改 for i in relut:file.write(i) #將出版社名稱寫入文件file.write("\n") #表示換行4.最后在你的存儲目錄下打開文件就可以查看內容了!
超強干貨來襲 云風專訪:近40年碼齡,通宵達旦的技術人生總結
以上是生活随笔為你收集整理的python之简单爬虫(爬取豆瓣出版社)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: python笔记之正则表达式
- 下一篇: websocket python爬虫_p