日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 编程资源 > 综合教程 >内容正文

综合教程

cheerio数据抓取

發(fā)布時間:2023/12/25 综合教程 33 生活家
生活随笔 收集整理的這篇文章主要介紹了 cheerio数据抓取 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

很多語言都能寫個爬蟲抓取數(shù)據(jù),js自然也可以,使用cheerio可以支持css檢索,較快捷的獲取需要的數(shù)據(jù)。首先,先把node.js給安裝了。可到官網(wǎng)下載。安裝好node.js后,使用npm安裝cheerio。

我這里使用的是win7,可以在 node.js command prompt 里輸入

1 npm install cheerio

要注意的是,到項目所在的目錄下執(zhí)行。

接著就可以開發(fā)了,使用node.js http模塊并引入cheerio模塊,使用get方式獲取待抓取的網(wǎng)頁內(nèi)容,具體的解析可以參考https://github.com/cheeriojs/cheerio;

 1 var url = "http://www.baidu.com/s?rtt=2&tn=baiduwb&rn=20&cl=2&wd=%BA%A3%D4%F4%CD%F5"
 2 var http = require("http");
 3 // Utility function that downloads a URL and invokes
 4 // callback with the data.
 5 function download(url, callback) {
 6     http.get(url, function(res) {
 7         var data = "";
 8         res.on('data', function(chunk) {
 9             data += chunk;
10         });
11         res.on("end", function() {
12             callback(data);
13         });
14     }).on("error", function() {
15         callback(null);
16     });
17 }
18 var cheerio = require("cheerio");
19 download(url, function(data) {
20     if (data) {
21         var $ = cheerio.load(data);
22         //id為weibo里的所有l(wèi)i,每個li里的段落p的內(nèi)容 
23         $('#weibo').find('li').each(function(i, elem) {
24             console.log($(this).find('p').text());
25             console.log(" ");
26         })
27     }
28     else
29         console.log("error");
30 });

保存為print.js,運行命令執(zhí)行print.js

1 node print.js

數(shù)據(jù)獲取成功:

總結(jié)

以上是生活随笔為你收集整理的cheerio数据抓取的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。