Python -bs4介绍
https://cuiqingcai.com/1319.html
Python -BS4詳細(xì)介紹
Python 在處理html方面有很多的優(yōu)勢(shì),一般情況下是要先學(xué)習(xí)正則表達(dá)式的.
在應(yīng)用過(guò)程中有很多模塊是非常方便的,先嘗試使用BeautifulSoup和Urllib進(jìn)行網(wǎng)頁(yè)的處理,僅供學(xué)習(xí).
首先列舉所需要導(dǎo)入的模塊:
from bs4 import BeautifulSoup??? # 處理獲取的網(wǎng)頁(yè)信息
import bs4??????????????????????????????????? # 用于判讀各類(lèi)類(lèi)型???????????????? ?
import os?????????????????????????????????????? #系統(tǒng)模塊,詳細(xì)信息整理于下一章節(jié)
import re??????????????????????????????????????? # 正則表達(dá)式,其實(shí)用不到
import time??????????????????????????????????? # 時(shí)間模塊,用于設(shè)置超時(shí)處理等
from urllib import request?????????????? # 用于獲取網(wǎng)頁(yè)信息
相關(guān)操作:
url = 'HTTP://XXXX'??? # 定義網(wǎng)頁(yè)地址
respons = request.urlopen(url,data=None,timeout=2)???? # 打開(kāi)地址
data = respons.read().decode('utf-8')?? # 讀取網(wǎng)頁(yè)信息
soup = BeautifulSoup(data, "html5lib")????????????????????????? # 用BeautifulSoup 解析
href = soup.find_all('a',target = "XXXX")? # BS4最重要的函數(shù),獲取相關(guān)節(jié)點(diǎn)兒,詳細(xì)信息自行學(xué)習(xí)
###
剩下的就自己處理就行了.
于2018-6-5 補(bǔ)充如下:
關(guān)于解析器引用官方文檔截圖:
??????? 1. tag ?
??????? tag中最重要的屬性: name和attributes
??????? tag.name 和tag["XXX"]
??????? 2. tag.string 和 tag.strings? 獲取字符內(nèi)容
??????? 3.??? find_all( name , attrs , recursive , text , **kwargs )
??????????????? name:tag的name
??????????????? attrs : 屬性
轉(zhuǎn)載于:https://www.cnblogs.com/moying-wq/p/10009805.html
創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎(jiǎng)勵(lì)來(lái)咯,堅(jiān)持創(chuàng)作打卡瓜分現(xiàn)金大獎(jiǎng)總結(jié)
以上是生活随笔為你收集整理的Python -bs4介绍的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 结构体+sort方法
- 下一篇: python怎么显示求余的除数_Pyth