上次爬取了百度圖片，是分析解決ajax的json的響應(yīng)的，對于一些網(wǎng)站的常見的翻頁，是這次主要內(nèi)容。

明確目標(biāo)

爬取的是豆瓣電影，并保存到csv格式中

爬取豆瓣是非常的簡單，因?yàn)闆]有任何反爬的機(jī)制

爬取的url ：https://movie.douban.com/explore

分析網(wǎng)站

和上次一樣的套路

爬取全代碼

# -*- coding：utf-8 -*- # time ：2019/4/8 13:00 # author: 毛利import requests import json headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36" }# utf-8 我們 需要 另一種編碼 utf-8-sig 選擇這個編碼 utf-8-sig def douban_spider(tag,nums,sort):

總結(jié)

以上是生活随笔為你收集整理的三、入门爬虫，爬取豆瓣电影的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。