爬蟲推薦的工具：
pyspider,
BeautifulSoup
requests
scrapy
mongodb
redis
kafka.
re
pyV8：python執(zhí)行js的插件
phatomjs：一個(gè)無界面的,可腳本編程的WebKit瀏覽器引擎。它原生支持多種web 標(biāo)準(zhǔn)：DOM 操作，CSS選擇器，JSON，Canvas 以及SVG
selenium：是一個(gè)用于Web應(yīng)用程序測試的工具。Selenium測試直接運(yùn)行在瀏覽器中,就像真正的用戶在操作一樣。

一開始推薦學(xué)習(xí)框架，比如scrapy或者Pyspider

數(shù)據(jù)分析：
pandas
scikit-learn
spark.
ntlk
jieba

pandas主要是處理金融數(shù)據(jù)得力，scikit-learn用來進(jìn)行機(jī)器學(xué)習(xí)，spark是分布式計(jì)算。nltk進(jìn)行予以分析。jieba用來做中文分詞。

轉(zhuǎn)載于:https://www.cnblogs.com/davidwang456/p/7494890.html

總結(jié)

以上是生活随笔為你收集整理的爬虫推荐的工具的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。