python+requests抓取貓眼中上映電影，re正則匹配獲取對應電影的排名，圖片地址，片名，主演及上映時間和評分

?

import requests import re, json def get_html(url):"""獲取網頁html源碼:return:"""user_agent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) " \"AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.169 Safari/537.36"# 瀏覽器信息headers = {"User-Agent": user_agent}r = requests.get(url, headers=headers) html = r.text# print(html)return htmldef parse_one_page(html):"""正則匹配需要內容:param html::return:"""# 排名+圖片地址+主演+上映時間+評分pattern = re.compile('<dd>.*?board-index.*?>(\d+)</i>.*?data-src="(.*?)".*?name"><a'+ '.*?>(.*?)</a>.*?star">(.*?)</p>.*?releasetime">(.*?)</p>'+ '.*?integer">(.*?)</i>.*?fraction">(.*?)</i>.*?</dd>', re.S)items = re.findall(pattern, html)for item in items:yield {"排名": item[0],"圖片地址": item[1],"片名": item[2],"主演": item[3].strip()[3:],"上映時間": item[4].strip()[4:],"分數": item[5] + item[6]}# 數據存儲def write_file(content):with open("result.txt", 'a+', encoding='utf-8') as f:f.write(json.dumps(content, ensure_ascii=False) + "\n")def main():"""主函數:return:"""url = "http://maoyan.com/board/4"html = get_html(url)for item in parse_one_page(html):print(item)write_file(item)if __name__ == '__main__':main()

?

轉載于:https://www.cnblogs.com/CesareZhang/p/11027772.html

總結

以上是生活随笔為你收集整理的python+requests+re匹配抓取猫眼上映电影信息的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。