如今很多有編程能力的小伙伴已經不滿足手動搜索內容了，都希望通過編寫爬蟲軟件來快速獲取需要的內容，那么如何使用python制作爬蟲呢？下面小編給大家講解一下思路

工具/原料

python

方法/步驟

1

首先我們需要確定要爬取的目標頁面內容，如下圖所示比如要獲取溫度值

2

然后我們需要打開瀏覽器的F12，查找所要獲取內容的特征，比如他有哪些樣式標簽或者ID屬性

3

接下來我們打開cmd命令行界面，導入requests庫和html庫，如下圖所示，這個lxml需要大家自行下載安裝

4

接著就是通過requests庫將頁面內容獲取過來，然后用lxml下的html將其轉化為文本，如下圖所示

5

接下來就是通過xpath語法進行特定元素內容的查找，這里一般會用到class或者id的名稱，如下圖所示

6

最后運行程序就可以獲取到需要的內容了，如下圖所示

7

綜上所述，運用python制作爬蟲主要是運用requests獲取內容，然后根據內容進行特定元素查找，這只是最簡單的流程，不過即使在復雜的爬蟲也是這幾步

END

經驗內容僅供參考，如果您需解決具體問題(尤其法律、醫學等領域)，建議您詳細咨詢相關領域專業人士。

舉報作者聲明：本篇經驗系本人依照真實經歷原創，未經許可，謝絕轉載。

展開閱讀全部

總結

以上是生活随笔為你收集整理的python爬虫用什么软件写_python爬虫怎么写的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。