Jsoup爬虫小案例
生活随笔
收集整理的這篇文章主要介紹了
Jsoup爬虫小案例
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
Jsoup爬蟲小案例
Jsoup爬蟲是眾多爬蟲中的一種，今天分享一個爬取網頁中圖片的方式，若是通過javascript循環(huán)放入圖片的話，那就爬取不到了喲！
在代碼書寫之前，需要做好以下工作準備：
這兩個包可以在網上直接下載。
接下來就是代碼的編寫：
index.jsp
ImgServlet.java
@WebServlet("/img") public class ImgServlet extends HttpServlet {@Overrideprotected void doGet(HttpServletRequest req, HttpServletResponse resp) throws ServletException, IOException {//1. 根據網址獲取網頁源碼Document doc = Jsoup.connect("爬取的網站名").get();//2. 找到所有圖片標簽imgElements es = doc.select("img[src]");//3. 遍歷每一個圖片標簽for (Element e : es) {String src = e.attr("src");//輸出獲取的圖片名稱System.out.println(src);getImg(src);}}private void getImg(String src) {System.out.println(1);try {//借助URL -- 將網頁上的圖片以字節(jié)流形式加載到程序中InputStream is = new URL("爬取的網站名" + src).openStream();//指定一個圖片保存路徑 -- 具體文件名FileOutputStream os = new FileOutputStream("爬取圖片后存放的路徑" + System.currentTimeMillis() + ".jpg");//io工具類，對接兩個流IOUtils.copy(is,os);} catch (IOException e) {e.printStackTrace();}} }這樣就可以爬取網頁中所有的jpg格式的圖片啦！
總結
以上是生活随笔為你收集整理的Jsoup爬虫小案例的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： mysql日期格式化季度_mysql按年
- 下一篇： FPL 2017最佳论文：如何对FPGA