??

注意這里的細節哦，對應代碼好好看。?

import requests from bs4 import BeautifulSoupdef get_movies():headers = {'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/14.1.2 Safari/605.1.15','Host':'movie.douban.com' }'''headers = {'user-agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36','Host':'movie.douban.com'} 原作者的headers.'''movie_list = []for i in range(0, 10):link = "https://movie.douban.com/top250?start=" + str(i * 25)r = requests.get(link, headers=headers, timeout=10)print(r.status_code)print(r.text)print(link)soup = BeautifulSoup(r.text,'lxml')div_list = soup.find_all('div',class_='hd')for each in div_list:movie = each.a.span.text.strip()movie_list.append(movie)# print(movie_list)return movie_listmovies = get_movies() print(movies) movies_str=str(movies)with open('movens.txt','a+') as f:f.write(movies_str)f.close()

輸出結果：?

?['肖申克的救贖', '霸王別姬', '阿甘正傳', '這個殺手不太冷', '泰坦尼克號', '美麗人生', '千與千尋', '辛德勒的名單', '盜夢空間', '忠犬八公的故事', '星際穿越', '楚門的世界', '海上鋼琴師', '三傻大鬧寶萊塢', '機器人總動員', '放牛班的春天', '無間道', '瘋狂動物城', '大話西游之大圣娶親', '熔爐', '教父', '當幸福來敲門', '龍貓', '控方證人', '怦然心動', '觸不可及', '末代皇帝', '蝙蝠俠：黑暗騎士', '尋夢環游記', '活著', '指環王3：王者無敵', '哈利·波特與魔法石', '亂世佳人', '何以為家', '素媛', '飛屋環游記', '摔跤吧！爸爸', '十二怒漢', '哈爾的移動城堡', '我不是藥神', '少年派的奇幻漂流', '鬼子來了', '大話西游之月光寶盒', '天空之城', '天堂電影院', '貓鼠游戲', '聞香識女人', '指環王2：雙塔奇兵', '羅馬假日', '鋼琴家', '讓子彈飛', '指環王1：護戒使者', '辯護人', '大鬧天宮', '教父2', '獅子王', '死亡詩社', '黑客帝國', '海蒂和爺爺', '搏擊俱樂部', '綠皮書', '飲食男女', '美麗心靈', '竊聽風暴', '本杰明·巴頓奇事', '兩桿大煙槍', '情書', '穿條紋睡衣的男孩', '西西里的美麗傳說', '看不見的客人', '飛越瘋人院', '拯救大兵瑞恩', '音樂之聲', '小鞋子', '阿凡達', '海豚灣', '致命魔術', '沉默的羔羊', '美國往事', '哈利·波特與死亡圣器(下)', '禁閉島', '蝴蝶效應', '布達佩斯大飯店', '心靈捕手', '低俗小說', '春光乍泄', '七宗罪', '摩登時代', '喜劇之王', '致命ID', '被嫌棄的松子的一生', '殺人回憶', '加勒比海盜', '紅辣椒', '剪刀手愛德華', '狩獵', '請以你的名字呼喚我', '勇敢的心', '7號房的禮物', '功夫', '斷背山', '超脫', '哈利·波特與阿茲卡班的囚徒', '天使愛美麗', '入殮師', '唐伯虎點秋香', '第六感', '幽靈公主', '重慶森林', '小森林 夏秋篇', '陽光燦爛的日子', '愛在黎明破曉前', '一一', '蝙蝠俠：黑暗騎士崛起', '菊次郎的夏天', '消失的愛人', '無人知曉', '超能陸戰隊', '哈利·波特與密室', '小森林 冬春篇', '完美的世界', '倩女幽魂', '愛在日落黃昏時', '側耳傾聽', '借東西的小人阿莉埃蒂', '甜蜜蜜', '螢火之森', '馴龍高手', '幸福終點站', '瑪麗和馬克思', '時空戀旅人', '大魚', '告白', '怪獸電力公司', '陽光姐妹淘', '射雕英雄傳之東成西就', '神偷奶爸', '傲慢與偏見', '教父3', '玩具總動員3', '恐怖直播', '釜山行', '一個叫歐維的男人決定去死', '哪吒鬧海', '被解救的姜戈', '血戰鋼鋸嶺', '未麻的部屋', '頭號玩家', '七武士', '我是山姆', '寄生蟲', '喜宴', '新世界', '電鋸驚魂', '模仿游戲', '哈利·波特與火焰杯', '花樣年華', '黑客帝國3：矩陣革命', '盧旺達飯店', '上帝之城', '風之谷', '三塊廣告牌', '瘋狂原始人', '諜影重重3', '英雄本色', '你的名字。', '頭腦特工隊', '達拉斯買家俱樂部', '縱橫四海', '心迷宮', '歲月神偷', '記憶碎片', '忠犬八公物語', '海街日記', '驚魂記', '荒蠻故事', '九品芝麻官', '爆裂鼓手', '貧民窟的百萬富翁', '真愛至上', '東邪西毒', '綠里奇跡', '小偷家族', '愛在午夜降臨前', '無敵破壞王', '黑天鵝', '冰川時代', '你看起來好像很好吃', '瘋狂的石頭', '螢火蟲之墓', '雨人', '色，戒', '雨中曲', '恐怖游輪', '戀戀筆記本', '魔女宅急便', '2001太空漫游', '城市之光', '可可西里', '二十二', '虎口脫險', '人工智能', '初戀這件小事', '海邊的曼徹斯特', '遺愿清單', '奇跡男孩', '大佛普拉斯', '羅生門', '終結者2：審判日', '牯嶺街少年殺人事件', '房間', '青蛇', '源代碼', '無間道2', '新龍門客棧', '東京教父', '瘋狂的麥克斯4：狂暴之路', '魂斷藍橋', '波西米亞狂想曲', '無恥混蛋', '步履不停', '血鉆', '茶館', '彗星來的那一夜', '燃情歲月', '戰爭之王', '千鈞一發', '黑客帝國2：重裝上陣', '諜影重重2', '海洋', '崖上的波妞', '阿飛正傳', '穿越時空的少女', '背靠背，臉對臉', '諜影重重', '地球上的星星', '香水', '小丑', '完美陌生人', '再次出發之紐約遇見你', '我愛你', '愛樂之城', '朗讀者', '火星救援', '驢得水', '聚焦', '小蘿莉的猴神大叔', '浪潮', '猜火車', '千年女優']['肖申克的救贖', '霸王別姬', '阿甘正傳', '這個殺手不太冷', '泰坦尼克號', '美麗人生', '千與千尋', '辛德勒的名單', '盜夢空間', '忠犬八公的故事', '星際穿越', '楚門的世界', '海上鋼琴師', '三傻大鬧寶萊塢', '機器人總動員', '放牛班的春天', '無間道', '瘋狂動物城', '大話西游之大圣娶親', '熔爐', '教父', '當幸福來敲門', '龍貓', '控方證人', '怦然心動', '觸不可及', '末代皇帝', '蝙蝠俠：黑暗騎士', '尋夢環游記', '活著', '指環王3：王者無敵', '哈利·波特與魔法石', '亂世佳人', '何以為家', '素媛', '飛屋環游記', '摔跤吧！爸爸', '十二怒漢', '哈爾的移動城堡', '我不是藥神', '少年派的奇幻漂流', '鬼子來了', '大話西游之月光寶盒', '天空之城', '天堂電影院', '貓鼠游戲', '聞香識女人', '指環王2：雙塔奇兵', '羅馬假日', '鋼琴家', '讓子彈飛', '指環王1：護戒使者', '辯護人', '大鬧天宮', '教父2', '獅子王', '死亡詩社', '黑客帝國', '海蒂和爺爺', '搏擊俱樂部', '綠皮書', '飲食男女', '美麗心靈', '竊聽風暴', '本杰明·巴頓奇事', '兩桿大煙槍', '情書', '穿條紋睡衣的男孩', '西西里的美麗傳說', '看不見的客人', '飛越瘋人院', '拯救大兵瑞恩', '音樂之聲', '小鞋子', '阿凡達', '海豚灣', '致命魔術', '沉默的羔羊', '美國往事', '哈利·波特與死亡圣器(下)', '禁閉島', '蝴蝶效應', '布達佩斯大飯店', '心靈捕手', '低俗小說', '春光乍泄', '七宗罪', '摩登時代', '喜劇之王', '致命ID', '被嫌棄的松子的一生', '殺人回憶', '加勒比海盜', '紅辣椒', '剪刀手愛德華', '狩獵', '請以你的名字呼喚我', '勇敢的心', '7號房的禮物', '功夫', '斷背山', '超脫', '哈利·波特與阿茲卡班的囚徒', '天使愛美麗', '入殮師', '唐伯虎點秋香', '第六感', '幽靈公主', '重慶森林', '小森林 夏秋篇', '陽光燦爛的日子', '愛在黎明破曉前', '一一', '蝙蝠俠：黑暗騎士崛起', '菊次郎的夏天', '消失的愛人', '無人知曉', '超能陸戰隊', '哈利·波特與密室', '小森林 冬春篇', '完美的世界', '倩女幽魂', '愛在日落黃昏時', '側耳傾聽', '借東西的小人阿莉埃蒂', '甜蜜蜜', '螢火之森', '馴龍高手', '幸福終點站', '瑪麗和馬克思', '時空戀旅人', '大魚', '告白', '怪獸電力公司', '陽光姐妹淘', '射雕英雄傳之東成西就', '神偷奶爸', '傲慢與偏見', '教父3', '玩具總動員3', '恐怖直播', '釜山行', '一個叫歐維的男人決定去死', '哪吒鬧海', '被解救的姜戈', '血戰鋼鋸嶺', '未麻的部屋', '頭號玩家', '七武士', '我是山姆', '寄生蟲', '喜宴', '新世界', '電鋸驚魂', '模仿游戲', '哈利·波特與火焰杯', '花樣年華', '黑客帝國3：矩陣革命', '盧旺達飯店', '上帝之城', '風之谷', '三塊廣告牌', '瘋狂原始人', '諜影重重3', '英雄本色', '你的名字。', '頭腦特工隊', '達拉斯買家俱樂部', '縱橫四海', '心迷宮', '歲月神偷', '記憶碎片', '忠犬八公物語', '海街日記', '驚魂記', '荒蠻故事', '九品芝麻官', '爆裂鼓手', '貧民窟的百萬富翁', '真愛至上', '東邪西毒', '綠里奇跡', '小偷家族', '愛在午夜降臨前', '無敵破壞王', '黑天鵝', '冰川時代', '你看起來好像很好吃', '瘋狂的石頭', '螢火蟲之墓', '雨人', '色，戒', '雨中曲', '恐怖游輪', '戀戀筆記本', '魔女宅急便', '2001太空漫游', '城市之光', '可可西里', '二十二', '虎口脫險', '人工智能', '初戀這件小事', '海邊的曼徹斯特', '遺愿清單', '奇跡男孩', '大佛普拉斯', '羅生門', '終結者2：審判日', '牯嶺街少年殺人事件', '房間', '青蛇', '源代碼', '無間道2', '新龍門客棧', '東京教父', '瘋狂的麥克斯4：狂暴之路', '魂斷藍橋', '波西米亞狂想曲', '無恥混蛋', '步履不停', '血鉆', '茶館', '彗星來的那一夜', '燃情歲月', '戰爭之王', '千鈞一發', '黑客帝國2：重裝上陣', '諜影重重2', '海洋', '崖上的波妞', '阿飛正傳', '穿越時空的少女', '背靠背，臉對臉', '諜影重重', '地球上的星星', '香水', '小丑', '完美陌生人', '再次出發之紐約遇見你', '我愛你', '愛樂之城', '朗讀者', '火星救援', '驢得水', '聚焦', '小蘿莉的猴神大叔', '浪潮', '猜火車', '千年女優']

參考資料

python爬取豆瓣電影top250，代碼及思路 - 知乎
BeautifulSoup中的find，find_all - 做夢當財神 - 博客園
網頁中怎么查看請求頭header信息_xiezhiming1234的博客-CSDN博客_網頁請求頭

總結

以上是生活随笔為你收集整理的爬取豆瓣top250电影练习的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。