Python爬取全國或城市的百度地圖慧眼（百度遷徙）遷入、遷出大數據

百度地圖慧眼（百度遷移）遷入遷出大數據的官網顯示如圖：

?

爬取百度遷移的大數據，Python代碼實現如下：

import requests import time import pandas as pd import datetime# 百度遷移方向 0遷入，1遷出 MOVE = ('move_in', 'move_out')""" 構造10個城市名和代碼 代碼可以在民政部查找，連接地址 http://www.mca.gov.cn/article/sj/xzqh/2019/2019/201912251506.html 上述連接是2019年11月中華人民共和國縣以上行政區劃代碼 """ CITY = {'北京': '110000','上海': '310000','廣州': '440100','深圳': '440300','成都': '510100','天津': '120000','南京': '320100','杭州': '330100','重慶': '500000','武漢': '420100'}def get_data_from_url(url):print('請求http數據', url)resp = requests.get(url, timeout=5)j = resp.json()if j['errmsg'] == 'SUCCESS':data_list = j['data']['list']return data_listelse:print('請求服務器數據失敗!')return Nonedef get_data(city_code, direction, date):if city_code is None:# 根據日期獲取當前全國熱門的遷入/遷出城市url_nation = f'http://huiyan.baidu.com/migration/cityrank.json?dt=country&id=0&type={direction}&date={date}'return get_data_from_url(url_nation)else:# 根據城市碼和日期獲取當前城市的遷入/遷出數據url_city = f'http://huiyan.baidu.com/migration/cityrank.json?dt=city&id={city_code}&type={direction}&date={date}'return get_data_from_url(url_city)def get_date(year, month, day):d = datetime.date(year, month, day)return d.__format__('%Y%m%d')def main():# 拼接特定日期，年月日date = get_date(2020, 11, 11)# 獲取給定日期、給定城市碼的城市遷入/遷出數據data = get_data(city_code=CITY['成都'], direction=MOVE[0], date=date)df = pd.DataFrame(data=data, columns=['city_name', 'province_name', 'value'])df.to_excel('1.xls', encoding='utf-8') # 數據寫入excel文件print(df)time.sleep(3)# 獲取給定日期全國熱門城市遷入/遷出數據data = get_data(city_code=None, direction=MOVE[0], date=date)df = pd.DataFrame(data=data, columns=['city_name', 'province_name', 'value'])df.to_excel('2.xls', encoding='utf-8') # 數據寫入excel文件if __name__ == '__main__':main()

?

輸出結果，數據存入excel表格，2020年11月11日全國熱門遷入城市排名數據：

?

?

?

總結

以上是生活随笔為你收集整理的Python爬取全国或特定城市百度地图慧眼、百度迁徙迁入迁出大数据的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。