Selenium实例1-自动登录小米社区并获取主题帖
生活随笔
收集整理的這篇文章主要介紹了
Selenium实例1-自动登录小米社区并获取主题帖
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
今天看到的一個教程,感覺很有意思.
當運行下面幾行代碼時,會自動打開chrome瀏覽器
我們打開小米社區登錄界面
#登錄地址 driver.get('https://account.xiaomi.com/pass/serviceLogin?callback=http%3A%2F%2Fbbs.xiaomi.cn%2Flogin%2Fcallback%3Ffollowup%3Dhttp%253A%252F%252Fbbs.xiaomi.cn%252F%26sign%3DM2E4MTg3MzE3MGJmZGFiMTc0MTE5NmNjZTAyYWNmMDZhNTEwOTU2NQ%2C%2C&sid=new_bbs_xiaomi_cn&_locale=zh_CN')在用戶名,密碼,立即登錄位置右擊審查元素,然后繼續右擊Copy-Xpath
driver.find_element_by_xpath(".//*[@id='username']").clear() driver.find_element_by_xpath(".//*[@id='username']").send_keys("17864309750") driver.find_element_by_xpath(".//*[@id='pwd']").clear() driver.find_element_by_xpath(".//*[@id='pwd']").send_keys("zmy123456") #注意這個單引號,雙引號 driver.find_element_by_xpath('//*[@id="login-button"]').click()此時運行代碼,chrome會自動打開,并填充界面,自動登錄小米社區,最后我們添加一點對url處理,并爬取貼子主題
完整代碼
from selenium import webdriver from bs4 import BeautifulSoup #需要先下載chromedriver driver = webdriver.Chrome('D:/Python/chromedriver_win32/chromedriver.exe') #登錄地址 driver.get('https://account.xiaomi.com/pass/serviceLogin?callback=http%3A%2F%2Fbbs.xiaomi.cn%2Flogin%2Fcallback%3Ffollowup%3Dhttp%253A%252F%252Fbbs.xiaomi.cn%252F%26sign%3DM2E4MTg3MzE3MGJmZGFiMTc0MTE5NmNjZTAyYWNmMDZhNTEwOTU2NQ%2C%2C&sid=new_bbs_xiaomi_cn&_locale=zh_CN') #刪除原本存在的賬號密碼 driver.find_element_by_xpath(".//*[@id='username']").clear() driver.find_element_by_xpath(".//*[@id='username']").send_keys("17864309750") driver.find_element_by_xpath(".//*[@id='pwd']").clear() driver.find_element_by_xpath(".//*[@id='pwd']").send_keys("zmy123456") #注意這個單引號,雙引號 driver.find_element_by_xpath('//*[@id="login-button"]').click() base_url = 'http://bbs.xiaomi.cn/d-{page}' for i in range(1,4):url = base_url.format(page=i)driver.get(url)soup = BeautifulSoup(driver.page_source,'html.parser')titles = soup.find_all('div',{'class':'title'})for title in titles:title_content = title.get_text().strip('\n')print(title_content) #或者get_text(),string總結
以上是生活随笔為你收集整理的Selenium实例1-自动登录小米社区并获取主题帖的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 安装SeleniumPhantomJS
- 下一篇: Selenium实例2-截图爬取漫画