日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

爬虫技术(02)神箭手爬虫实时API

發布時間:2024/1/8 编程问答 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 爬虫技术(02)神箭手爬虫实时API 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
var scanUrl = "http://www.leiphone.com/news/201610/9EbxjV73a9kGhN3a.html" ;//@input(scanUrl, 文章url, 請輸入正確的url)var configs = {domains: ["leiphone.com"],scanUrls: [scanUrl],fields: [{// 抽取文章頁面的標題name: "article_title",selector: "//h1[contains(@class,'headTit')]",required: true},{// 抽取文章頁面的內容name: "article_content",selector: "//div[contains(@class,'lph-article-comView')]",required: true},{// 抽取文章頁面的發布日期name: "article_publish_time",selector: "//td[contains(@class,'time')]",required: true},{// 抽取文章頁面的作者name: "article_author",selector: "//td[contains(@class,'aut')]/a",required: true}] };// 在"afterExtractField回調函數"中將爬取到的時間轉換為秒級時間戳 configs.afterExtractField = function(fieldName, data, page, site) {if (fieldName == "article_publish_time") {var timestamp = Date.parse(data);return isNaN(timestamp) ? 0 : parseInt(timestamp/1000);}return data; };// 使用以上配置創建一個實時API var fetcher = new Fetcher(configs); // 運行實時API fetcher.start();

總結

以上是生活随笔為你收集整理的爬虫技术(02)神箭手爬虫实时API的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。