用Python快速从深层嵌套 JSON 中找到特定的 Key

最新推荐文章于 2023-09-27 09:50:22 发布
最新推荐文章于 2023-09-27 09:50:22 发布
阅读量1.5k 收藏
点赞数
分类专栏： python 文章标签： python 编程语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/python_miao/article/details/113395380
版权
本文介绍了如何使用Python手写一个JsonPathFinder模块，该模块能从深层嵌套的JSON中查找特定字段。通过示例展示了如何找到Twitter用户时间线接口中的cursor字段，以及模块的工作原理和使用方法，帮助开发者更高效地处理JSON数据。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在爬虫开发的过程中，我们经常遇到一些 Ajax 加载的接口会返回 JSON 数据。如下图所示，是 Twitter 的用户时间线接口，返回了一段3000多行的深层嵌套 JSON：

图片

其中的cursor这个字段，是请求下一页的必要字段，我必须把它的 value 值读取出来，拼接到请求 URL 中，才能请求下一页的内容。

现在问题来了，cursor字段在这个 JSON 里面的哪个位置？从最外层开始，我应该怎么样才能读取到最里面的这个cursor中的value字段的值？

我知道已经有一些第三方库可以直接根据字段名读取 JSON 内部任意深度的值，不过用别人的东西总没有自己写一个轮子来得过瘾。所以今天我们自己来手写一个模块，我把他叫做JsonPathFinder，传入一个 JSON 字符串和需要读取的字段名，返回从最外层开始直到这个字段的路径。

很多人学习python，不知道从何学起。
很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。
很多已经做案例的人，却不知道如何去学习更加高深的知识。
那么针对这三类人，我给大家提供一个好的学习平台，免费领取视频教程，电子书籍，以及课程的源代码！
QQ群：609616831

效果演示

我们用 Python 之父龟

最低0.47元/天 解锁文章
python使用jsonpath来查找key并赋值
这家伙很懒，什么都没有留下
05-24 1657
JsonPath是一种在JSON文档中查询信息的表达式语言，它允许用户通过简单的路径表达式来定位和提取JSON中的元素。JsonPath的语法类似于XPath，但专门为JSON设计。JsonPath的查询表达式由两部分组成：一个路径表达式和一个可选的谓词表达式。路径表达式用于指定要查询的JSON元素的路径，而谓词表达式则用于过滤或选择特定的元素。JsonPath支持多种操作符和函数，如.（子元素）、..（递归下降）、*（通配符）、[]（索引）等。这些操作符和函数可以组合使用，以构建复杂的查询表达式。
PythonJSON解析如何优雅处理嵌套JSON字符串
最新发布
木头大左的博客
04-07 163
为了解决这个问题，需要自定义解析策略。一种方法是使用正则表达式来找到并保留那些看起来像JSON字符串但实际上不应被解析的部分。然后，可以手动处理这些部分。
Python查找不限层级Json数据中某个key或者value的路径方式
09-17
今天小编就为大家分享一篇Python查找不限层级Json数据中某个key或者value的路径方式，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
Python 递归查找json中的key的值
蓝一潇的博客
08-19 1万+
项目很多时候需要找到一个层层嵌套的json里面某一个或者几个key的值，这时候就需要遍历整一个json来获得这些值。 因此我封装了一个class，专门给大家来在一个json中递归查找需要的key的value, 下面给出源码（复制到自己的项目里面引入即可） 下面有介绍用法 # coding:utf8 import json class GetKeyValue(object): def __...
python在json文件中查找指定数据_使用Python在JSON中查找值
weixin_39531229的博客
12-01 3674
I’ve previously succeeded in parsing data from a JSON file, but now I’m facing a problem with the function I want to achieve. I have a list of names, identification numbers and birthdate in a JSON. Wh...
Python查找不限层级Json数据中某个key或者value的路径
funcups的博客
07-18 3211
最近项目中有一个小需求，查找json文件中某个key或者value的路径，所以就写了一个简单的小脚本，比较粗糙。 #!/usr/bin/env python3 # -*- coding:utf-8 -*- ''' @author: funcups ''' from logzero import logger import ast class HandleJson(): def __...
python 获取json所有字段_用Python快速从深层嵌套 JSON 中找到特定的 Key
weixin_36460573的博客
02-09 1965
原标题：用Python快速从深层嵌套 JSON 中找到特定的 Key在爬虫开发的过程中，我们经常遇到一些 Ajax 加载的接口会返回 JSON 数据。如下图所示，是 Twitter 的用户时间线接口，返回了一段3000多行的深层嵌套 JSON： 其中的cursor 这个字段，是请求下一页的必要字段，我必须把它的value 值读取出来，拼接到请求 URL 中，才能请求下一页的内容。现在问题来了， c...
python json多层嵌套取值,使用Python从嵌套JSON对象中提取数据
weixin_42515409的博客
11-28 1942
From this nested JSON object I need to parse out and pretty print the value for "id" and the value for "location".{"links": {"self": "http://localhost:2510/api/v2/jobs?skills=data%20science"},"data": ...
python字典嵌套字典的情况下找到某个key的value详解
09-19
在Python编程语言中，字典（Dictionary）是一种非常重要的数据结构，它以键值对的形式存储数据，允许通过键（Key）快速访问对应的值（Value）。在某些复杂的应用场景下，字典可能会嵌套字典，形成多层结构，这在处理...
python遍历判断json是否存在某个key
AI创世纪的博客
09-27 1202
最近在开发一个数据抓取业务模块,用于抓取本地数据库的部分关键数据, 作为数据分析和统计的依据. 在抓取过程中, 由于不同子业务项目产生的数据结构不是完全一样, 这时候就要用到判断数据节点是否存在的功能, 数据是json格式.
python 提取key 为中文的json 串方法
12-31
示例： # -*- coding:utf-8 -*- import json strtest = {中故宫:好地方,天涯:北京} print strtest #####{'\xe4\xb8\xad\xe6\x95\x85\xe5\xae\xab': '\xe5\xa5\xbd\xe5\x9c\xb0\xe6\x96\xb9', '\xe5\xa4\xa9\xe6\xb6\xaf': '\xe5\x8c\x97\xe4\xba\xac'} strtestObj = json.loads(json.dumps(strtest)) print >>strtestObj ,str
python如何处理多层嵌套的json_如何快速从深层嵌套 JSON 中找到特定的 Key
weixin_31903257的博客
01-22 4169
摄影：产品经理冻黄鱼鱼子酱在爬虫开发的过程中，我们经常遇到一些 Ajax 加载的接口会返回 JSON 数据。如下图所示，是 Twitter 的用户时间线接口，返回了一段3000多行的深层嵌套 JSON：其中的cursor这个字段，是请求下一页的必要字段，我必须把它的 value 值读取出来，拼接到请求 URL 中，才能请求下一页的内容。现在问题来了，cursor字段在这个 JSON 里面...
Python获取json中key值为中文的value
tekenuo的专栏
03-22 6288
# -*- coding:UTF-8 -*- import json def getPinyinFromLocal(in_hanzi): with open("result.txt",'r') as file_name: js_localpinyin = json.load(file_name,"utf-8") pinyin = js_localpinyin.get(in_hanz...
Python3 递归查找json中的key所在的位置
xufulin2的博客
03-09 1391
First.No bullshit.Just show the code.And the result. # coding:utf8 import json # source code URL: https://blog.youkuaiyun.com/weixin_42744102/article/details/99722187 class FindKey(object): def __init__(self, obj): self.json_object = None if
python 读取多层嵌套的json数据
u010481688的博客
11-12 2万+
模块名称：jsonpath 主要特点 支持路径及*模糊匹配 支持索引和类似切片功能 支持表达式筛选 jsonpath安装 pip install jsonpath jsonpath基本语法 jsonpath使用示例 json样例： 代码： from jsonpath import jsonpath 说明：1. 匹配结果为一个列表, 无结果返回False ...
python取多层嵌套json最里层的数据_python解析多层嵌套json
weixin_39541681的博客
03-02 4024
python 多层嵌套的json内容 怎么获取如下，已经实现获取json中的指定内容，先在的问题是：有的json目标内容可以首先使用json包的loads函数对json数据进行解析，然后就可以像操作Python数据格式一样对数据进行索引和遍历了。 import json s = '{"aescCityList":null,"cityAllList":null,"cityJsonArray"...'...
获取json的key
哲的博客
12-13 1476
var msg = "{'id': 1, 'name': '张飞'}"; msg = eval("("+msg+")"); for (var key in msg) { alert("key = " + key + " value = " + msg[key]); }
python提取json嵌套字段_Python-访问任意嵌套的JSON数据中的特定字段
weixin_39854326的博客
12-03 862
小编典典在一行中>>> json.loads(data['data']['video_info'][0]['announcement'])['content']'FOLLOW ME PLEASE'为了帮助你了解如何访问数据(因此你无需再次询问)，你需要凝视你的数据。首先，让我们很好地布置你的数据。你可以使用json.dumps(data, indent=4)，也可以使用JSONL...
python-Json模块【解析Json】
热门推荐
gexiaobaoHelloWorld的专栏
09-05 4万+
1，Json模块介绍 JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。易于人阅读和编写。同时也易于机器解析和生成。它基于JavaScript Programming Language, Standard ECMA-262 3rd Edition - December 1999的一个子集。JSON采用完全独立于语言的文本格式，但是也使用了类似于C语言家
python 获取多层嵌套的json中的key
09-20
### 回答1： 在Python中，可以使用内置的json模块来访问多层嵌套的JSON中的key，例如：import jsonjson_data = {'a': {'b': {'c': {'d': 'foo'}}}}key = json_data['a']['b']['c']['d']print(key)# foo ### 回答2： 在Python中，我们可以使用递归函数来获取多层嵌套的JSON中的key。 首先，我们需要导入json模块来解析JSON数据。然后，我们可以定义一个递归函数，该函数接收一个嵌套的JSON数据和一个存储key的列表作为参数。 在递归函数中，我们首先判断当前数据类型是否为字典。如果是字典类型，则使用for循环遍历字典的每一个key，然后将key添加到存储key的列表中。然后，判断该key对应的值的数据类型是否为字典或列表。如果是字典或列表，则调用递归函数继续遍历获取内部的key。 如果当前数据类型不是字典，那么我们可以认为是基本类型或其它特殊类型，直接将其添加到存储key的列表中。 最后，当递归函数遍历完整个JSON数据后，我们就可以得到一个包含所有key的列表。 下面是一个示例代码： ```python import json def get_nested_keys(data, keys): if isinstance(data, dict): for key in data: keys.append(key) if isinstance(data[key], (dict, list)): get_nested_keys(data[key], keys) elif isinstance(data, list): for item in data: if isinstance(item, (dict, list)): get_nested_keys(item, keys) # 示例JSON数据 json_data = ''' { "key1": "value1", "key2": { "key3": "value3", "key4": ["value4", "value5"] } } ''' # 解析JSON数据 data = json.loads(json_data) # 获取所有key并打印 keys = [] get_nested_keys(data, keys) print(keys) ``` 输出结果为： ``` ['key1', 'key2', 'key3', 'key4'] ``` 以上就是使用Python获取多层嵌套的JSON中的key的方法。 ### 回答3： 在Python中，可以通过递归的方式获取多层嵌套的JSON中的key。 首先，我们可以使用`json`模块中的`loads`函数将JSON字符串转换为Python的字典对象。然后，我们可以通过遍历字典对象的键来判断值的类型。如果值的类型为字典，则可以递归地调用相同的函数来获取下一层的key。如果值的类型为其他类型（如列表、字符串等），则可以直接打印出该key。 示例代码如下： ```python import json def get_keys(data, parent_key=''): if isinstance(data, dict): for key, value in data.items(): new_key = f"{parent_key}.{key}" if parent_key else key if isinstance(value, dict): get_keys(value, new_key) else: print(new_key) # 示例JSON数据 json_data = ''' { "key1": "value1", "key2": { "key3": "value3", "key4": { "key5": "value5" } }, "key6": [ { "key7": "value7" }, { "key8": "value8" } ] } ''' # 将JSON字符串转换为字典对象 data = json.loads(json_data) # 获取所有的key get_keys(data) ``` 输出结果为： ``` key1 key2.key3 key2.key4.key5 key6.0.key7 key6.1.key8 ``` 这样，我们就可以获取多层嵌套的JSON中的全部key了。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值