urllib包和http包都是面向HTTP協議的。其中urllib主要用于處理 URL，使用urllib操作URL可以像使用和打開本地文件一樣地操作。而 http包則實現了對 HTTP協議的封裝，是urllib.request模塊的底層。

1.urllib包簡介

2. http 包簡介

1.urllib包簡介

urllib包主要模塊有：

1.urllib.request -----用于打開 URL網址；

2.urllib.error ---------定義了常見的urllib.request會引發的異常；

3.urllib.parse---------用于解析 URL；

具體方法：

urllib.request.urlopen( url，data，proxies ) ：用于打開 url

參數如下：

url：要進行操作的 URL地址

data：可選項。向URL 傳遞的數據。

proxies：可選項。使用的代理地址

import urllib.request

url = 'http://www.baidu.com' #網頁為百度首頁

respone = urllib.request.urlopen(url) #打開url地址,并返回一個 HTTPRespone實例

html = respone.read().decode('utf-8') #調用實例的 read()方法，并用 utf-8進行解碼處理。就得出完整的百度的HTML文件

print(html)

部分打印結果：

urllib.request.urlretrieve(url，filename，reporthook，data) ：用于將 URL的HTML文件下載并保存為本地文件

參數如下：

url：要下載的網頁

filename：保存在主機的路徑，可選項。

reporthook：一個回調函數，可選項。

data：發送的數據，一般用于 post，可選項。

特別：關于urlretrieve()的回調函數reporthook：可以用來顯示下載的進度，幾乎已經封裝好

import urllib.request

def callbackfunc(blocknum, blocksize, totalsize): #這三個參數是由 urlretrieve自動賦值的

'''回調函數

@blocknum: 已經下載的數據塊

@blocksize: 數據塊的大小

@totalsize: 遠程文件的大小

'''

percent = 100.0 * blocknum * blocksize / totalsize

if percent > 100:

percent = 100

print( "%.2f%%"% percent) #保留兩位小數

url = 'http://www.sina.com'

local = 'd:\\sina.html' #下載的html文件保存在 d盤的sina.html里

urllib.request.urlretrieve(url,local,callbackfunc) #沒下載完一個數據塊，就會執行回調函數一次

執行結果：

//只顯示局部

0.00%

1.38%

2.76%

4.13%

5.51%

6.89%

2. http包簡介

http包提供了 HTTP協議的一些功能，主要模塊有：

http.client --- 底層的 HTTP 協議的一些功能，可以為 urllib.request 模塊所用

http.server --- 提供了基于 socketserver模塊的基本 HTTP服務器類

http.cookies --- cookies 的管理工具

http.client ：

HttpClient不是一個瀏覽器。它是一個客戶端的HTTP通信實現庫。HttpClient的目標是發送和接收HTTP報文。

兩個主要類(用于客戶端)：

HTTPConnection ：基于HTTP協議的客戶端，指定 URL(網址) 后，可以 發送請求報文 和 接收響應報文

HTTPRespone ：基于 HTTP 協議的服務端回應。一旦用 HTTPConnection 成功連接，可以調用相關方法返回該實例(HTTPRequest實例)。

(1)HTTPConnection 的方法：

構造方法： HTTPConnection( host，port，[timeout] ) 返回一個HTTPConnection 實例

host：表示主機域名或 ip 地址

port：表示端口

timeout：阻塞操作將會在給定時間后超時。可選項

發送請求報文方法：HTTPConnection.request( method，url，body =None，headers = {} )

method：發送的操作，一般為 GET 或者 POST

url ：進行操作的 url

body ：所發送的數據

headers：發送的 HTTP頭部，是一個字典類型

獲取響應報文方法：HTTPConnection.getrespone( )

關閉與服務器的連接： HTTPConne.close()

發送一個頭部：HTTPConnection.putheader( header，args[ ] ) #頭部以一個字典方式發送

發送一個空白行到服務器，標志頭部Header的結束：HTTPConnection.endheaders( )

發送數據到服務器：HTTPConnection.send( data ) ，應該在endheaders()之后 和 getrespone()之前調用。

(2)HTTPRespone：

HTTPRespone對象：一旦用 HTTPConnection 成功連接，可以調用HTTPConnection.getrespone()返回該實例(HTTPRequest實例)。

HTTPRespone.getheader(name) ：返回頭部中的 name 字段對應的值

HTTPRespone.getheaders( ) ：以元組的方式返回整個頭部的信息

HTTPRespone.read() ：返回響應報文中的body部分，也即正文部分

HTTPRespone.status #返回狀態碼

HTTPRespone.version #返回 HTTP協議版本

http 包應用實例 。

from http.client import HTTPConnection

con = HTTPConnection('www.baidu.com',80)

con.request('GET','/') #發送請求報文

res = con.getresponse() #獲取響應報文對象

print(res.status) #200 (表示狀態碼)

print(res.reason) #OK (表示狀態碼對應的意義)

print(res.read().decode('utf-8')) #打印www.baidu.com的html

以上這篇對python3 urllib包與http包的使用詳解就是小編分享給大家的全部內容了，希望能給大家一個參考，也希望大家多多支持腳本之家。

總結

以上是生活随笔為你收集整理的python3 urllib安装_对python3 urllib包与http包的使用详解的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。