微博json文件_python 爬取微博评论 !
嚶嚶嚶,寫的時(shí)候剛好在放這首歌就順手點(diǎn)上去了。
內(nèi)容僅供學(xué)習(xí)參考!!!
一 . 介紹
微博:
(1)網(wǎng)頁(yè)端:http://http://weibo.com
(2)手機(jī)端:http://http://m.weibo.cn
(3)移動(dòng)端:http://weibo.cn
以下是三種方式的頁(yè)面:
爬取難度:網(wǎng)頁(yè)端>手機(jī)端>移動(dòng)端(頁(yè)面最丑,最好爬)
Python學(xué)習(xí)交流群:1004391443,這里有資源共享,技術(shù)解答,還有小編從最基礎(chǔ)的Python資料到項(xiàng)目實(shí)戰(zhàn)的學(xué)習(xí)資料都有整理,希望能幫助你更了解python,學(xué)習(xí)python。
!!!本文選取難度適中的手機(jī)端。
二. 分析
因?yàn)槲⒉┦莿?dòng)態(tài)加載的,所以下拉頁(yè)面就會(huì)出url是不同的,我們需要做到找到共同的規(guī)律。
發(fā)現(xiàn)max_id的值不同,max_id_type也是不同的
而max_id和max_id_type在返回的json文件里面有出現(xiàn)。
所以此處URL是由https://m.weibo.cn/comments/hotflow?用戶id&midid&max_id&max_id_type組成
獲取相關(guān)數(shù)據(jù)層層“撥開”
如獲取評(píng)論者“昵稱”
data_name=html.json()['data']['data'][0]['user]['screen_name']
三. 程序
四. 結(jié)果
五. 我只是學(xué)習(xí)的搬運(yùn)工,堅(jiān)信1000小時(shí)定律。
記錄學(xué)習(xí),排版令人絕望
總結(jié)
以上是生活随笔為你收集整理的微博json文件_python 爬取微博评论 !的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: python自学行_怎么自学python
- 下一篇: python四大高阶函数_详谈Pytho