1、處理登錄表單

處理登錄表單可以分為2步：

第一、查看網(wǎng)站登錄的表單，構(gòu)建POST請求的參數(shù)字典；

第二、提交POST請求。

打開知乎登錄界面，https://www.zhihu.com/#signin，

按f12，打開開發(fā)者界面：

在這里面找到headers信息，

現(xiàn)在在用戶名和密碼處查找信息，

發(fā)現(xiàn)用戶名的屬性為account，account中的內(nèi)容為我們的用戶名；

同理，password中的內(nèi)容為我們的密碼。

在登錄表單中，有些key值在瀏覽器中設(shè)置了hidden值，不會顯示出來，這個時候我們需要去審查元素中去查找，

發(fā)現(xiàn)了，cookie中有一個_xsrf的屬性，類似于token的作用。而這個東西的存在，就讓我們在模擬登錄的時候，必須將這個屬性作為參數(shù)一起加在請求中發(fā)送出去。

而獲取_xsrf則可以用之前的BeautifulSoup獲取

importrequestsfrom bs4 importBeautifulSoup as bs

session=requests.session()

post_url= ‘https://www.zhihu.com/#signin‘a(chǎn)gent= ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Maxthon/5.1.2.3000 Chrome/55.0.2883.75 Safari/537.36‘headers={"Host": "www.zhihu.com","Referer":"http://www.zhihu.com/",‘User-Agent‘:agent

}

postdata={‘password‘: ‘*****‘,‘a(chǎn)ccount‘: ‘******‘,

}

response= bs(requests.get(‘http://www.zhihu.com/#signin‘,headers=headers).content, ‘html.parser‘)

xsrf= response.find(‘input‘,attrs={‘name‘:‘_xsrf‘})[‘value‘]

postdata[‘_xsrf‘] =xsrf

responed= session.post(‘http://www.zhihu.com/login/email‘,headers=headers,data=postdata)print(responed)

結(jié)果顯示：

；

代碼做一些修改：

import requests

from bs4 import BeautifulSoup

session = requests.session()

agent = ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Maxthon/5.1.2.3000 Chrome/55.0.2883.75 Safari/537.36‘

headers = {

"Host": "www.zhihu.com",

"Origin":"https://www.zhihu.com/",

"Referer":"http://www.zhihu.com/",

‘User-Agent‘:agent

}

postdata = {

‘password‘: ‘*****‘,

‘a(chǎn)ccount‘: ‘******‘,

}

response = session.get("https://www.zhihu.com", headers=headers)

soup = BeautifulSoup(response.content, "html.parser")

xsrf = soup.find(‘input‘, attrs={"name": "_xsrf"}).get("value")

postdata[‘_xsrf‘] =xsrf

login_page = session.post(‘http://www.zhihu.com/login/email‘, data=postdata, headers=headers)

print(login_page.status_code)

運行結(jié)果：200

代表響應(yīng)的狀態(tài)為請求成功，可以成功登錄表單。

原文地址：http://www.cnblogs.com/leon507/p/7633012.html

總結(jié)

以上是生活随笔為你收集整理的python爬_python爬虫--模拟登录知乎的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。