日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

python jsonpath-rw_Python使用jsonpath-rw模块处理Json对象操作示例

發布時間:2024/9/27 39 豆豆
生活随笔 收集整理的這篇文章主要介紹了 python jsonpath-rw_Python使用jsonpath-rw模块处理Json对象操作示例 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

本文實例講述了Python使用jsonpath-rw模塊處理Json對象操作。分享給大家供大家參考,具體如下:

這兩天在寫一個爬蟲,需要從網站返回的json數據提取一些有用的數據。

向url發起請求,返回的是response,在python3中,response.content是二進制bytes類型的,需要用decode()轉成unicode的str類型

#如果用的requests發的請求

import json

response = requests.get(url,headers=self.headers)

response = response.content.decode()

response = json.loads(response) #轉成json對象,在python里也就是dict類型

#如果用的scrapy.Request發的請求

import json

import scrapy

response = scrapy.Request(url,headers=self.headers)

response = response.text.decode()

response = json.loads(response) #轉成json對象,在python里也就是dict類型

也就是說處理json對象其實可以和處理dict一樣,那就要用到很多中括號,而且取值也只能取單個精確的值。一點都不靈活

用過xpath和css選擇器的人當然會覺得這種方法很笨重。

而恰巧json也有類型的選擇器:jsonpath

但是需要注意的是,python的庫并不是jsonpath(還真有這個庫,但是不知如何使用,官方也沒有給出python的使用文檔),真正在python中可以使用的庫是:jsonpath-rw

下面只列下簡單常用的基本方法

使用示例

>>> from jsonpath_rw import jsonpath, parse

>>> json_obj = {"student":[{"male":176,"female":162},{"male":174,"female":159}]}

>>> jsonpath_expr = parse("student[*].male")

>>> male = jsonpath_expr.find(json_obj)

>>> male #返回的是list,但是不是我們想要的值

[DatumInContext(value=176, path=Fields('male'), context=DatumInContext(value={'male': 176, 'female': 162}, path=, context=DatumInContext(value=[{'male': 176, 'female': 162}, {'male': 174, 'female': 159}], path=Fields('student'), context=DatumInContext(value={'student': [{'male': 176, 'female': 162}, {'male': 174, 'female': 159}]}, path=This(), context=None)))), DatumInContext(value=174, path=Fields('male'), context=DatumInContext(value={'male': 174, 'female': 159}, path=, context=DatumInContext(value=[{'male': 176, 'female': 162}, {'male': 174, 'female': 159}], path=Fields('student'), context=DatumInContext(value={'student': [{'male': 176, 'female': 162}, {'male': 174, 'female': 159}]}, path=This(), context=None))))]

#想要獲取值,要用如下方法

>>> [match.value for match in male]

[176, 174]

創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎

總結

以上是生活随笔為你收集整理的python jsonpath-rw_Python使用jsonpath-rw模块处理Json对象操作示例的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。