python爬虫实例1：获取一个网页的列表数据
生活随笔
收集整理的這篇文章主要介紹了
python爬虫实例1：获取一个网页的列表数据
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
python爬蟲實例1：獲取一個網頁的列表數據
import requests #導入requests包 from bs4 import BeautifulSoup import time#設置請求頭 headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.190 Safari/537.36' } #列表頁URL url='https://www.ygdy8.net/html/gndy/dyzz/index.html'strhtml=requests.get(url,headers=headers) strhtml.encoding='gb2312' #這個網站編碼格式是gb2312 soup=BeautifulSoup(strhtml.text,'lxml')#獲取class="co_content8"的div標簽 co_content8 = soup.find('div',class_="co_content8")#獲取class="tbspan"的所有table標簽 tables = co_content8.find_all('table',class_="tbspan")for table in tables:#獲取table標簽下面的所有a標簽aa = table.find('a',class_="ulink")#打印出來所有a標簽的電影標題，和詳情頁連接print(aa.text,aa['href']) print("ok")總結
以上是生活随笔為你收集整理的python爬虫实例1：获取一个网页的列表数据的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： 入职新公司二三事
- 下一篇： 分析Python7个爬虫小案例（附源码）