猫眼电影获取票房信息
生活随笔
收集整理的這篇文章主要介紹了
猫眼电影获取票房信息
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
import requests
import re
import os
from fontTools.ttLib import TTFont
class MaoYan(object):
def __init__(self):
self.url = 'http://maoyan.com/films/1198214'
self.headers = {
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36"
}
# 發送請求獲得響應
def get_html(self, url):
response = requests.get(url, headers=self.headers)
return response.content
# 創建 self.font 屬性
def create_font(self, font_file):
# 列出已下載文件
file_list = os.listdir('./fonts')
# 判斷是否已下載
if font_file not in file_list:
# 未下載則下載新庫
print('不在字體庫中, 下載:', font_file)
url = 'http://vfile.meituan.net/colorstone/' + font_file
new_file = self.get_html(url)
with open('./fonts/' + font_file, 'wb') as f:
f.write(new_file)
# 打開字體文件,創建 self.font屬性
self.font = TTFont('./fonts/' + font_file)
# 把獲取到的數據用字體對應起來,得到真實數據
def modify_data(self, data):
# 獲取 GlyphOrder 節點
gly_list = self.font.getGlyphOrder()
# 前兩個不是需要的值,截掉
gly_list = gly_list[2:]
# 枚舉, number是下標,正好對應真實的數字,gly是亂碼
for number, gly in enumerate(gly_list):
# 把 gly 改成網頁中的格式
gly = gly.replace('uni', '&#x').lower() + ';'
# 如果 gly 在字符串中,用對應數字替換
if gly in data:
data = data.replace(gly, str(number))
# 返回替換后的字符串
return data
def start_crawl(self):
html = self.get_html(self.url).decode('utf-8')
# 正則匹配字體文件
font_file = re.findall(r'vfile.meituan.net/colorstone/(w+.woff)', html)[0]
self.create_font(font_file)
# 正則匹配星級
star = re.findall(r'<span class="index-left info-num ">s+<span class="stonefont">(.*?)</span>s+</span>', html)[0]
star = self.modify_data(star)
# 正則匹配評論的人數
people = ''.join(re.findall(r'''<span class='score-num'><span class="stonefont">(.*?萬)</span>(人評分)</span>''', html)[0])
people = self.modify_data(people)
# 正則匹配累計票房
ticket_number = ''.join(re.findall(r'''<span class="stonefont">(.*?)</span><span class="unit">(億)</span>''', html)[0])
ticket_number = self.modify_data(ticket_number)
print('用戶評分: %s 星' % star)
print('評分人數: %s' % people)
print('累計票房: %s' % ticket_number)
if __name__ == '__main__':
maoyan = MaoYan()
maoyan.start_crawl()
總結
以上是生活随笔為你收集整理的猫眼电影获取票房信息的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 如何在Marketing Cloud的弹
- 下一篇: 百度地图1