python 爬虫抓取网页数据导出excel_Python实现抓取网页生成Excel文件的方法示例
本文實(shí)例講述了Python實(shí)現(xiàn)抓取網(wǎng)頁生成Excel文件的方法。分享給大家供大家參考,具體如下:
Python抓網(wǎng)頁,主要用到了PyQuery,這個跟jQuery用法一樣,超級給力
示例代碼如下:
#-*- encoding:utf-8 -*-
import sys
import locale
import string
import traceback
import datetime
import urllib2
from pyquery import PyQuery as pq
# 確定運(yùn)行環(huán)境的encoding
reload(sys);
sys.setdefaultencoding('utf8');
f = open('gongsi.csv', 'w');
for i in range(1,24):
d = pq(url="http://www.yourwebname.com/?Code=HANGYELINGYU&myFlag=allShow&SiteID=122&PageIndex=%d"%(i));
itemsa=d('dl dt a') #取title元素
itemsb=d('dl dd') #取title元素
for j in range(0,len(itemsa)):
f.write("%s,\"%s\"\n"%(itemsa[j].get('title'),itemsb[j*2].text));
#end for
#end for
f.close();
接下來就是用Notepad++打開gongsi.csv,然后轉(zhuǎn)成ANSI編碼格式,保存。再用Excel軟件打開這個csv文件,另存為Excel文件
希望本文所述對大家Python程序設(shè)計有所幫助。
總結(jié)
以上是生活随笔為你收集整理的python 爬虫抓取网页数据导出excel_Python实现抓取网页生成Excel文件的方法示例的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 王译潇20162314 第九周作业总结
- 下一篇: python3一个简单的网页抓取