当前位置: 首页 > news >正文

Python处理 “列表套字典” 结构JSON数据的三种方式对比

        通常,对于 “列表套字典”(JSON 数组包含对象)类型的 JSON 文件,查找并修改特定键值的思路是:先遍历列表中的每个字典,找到符合条件的目标字典,再修改该字典中指定键的值,最后写回文件。

示例场景:

        假设 users.json 文件内容如下(列表套字典结构):

[{"id": 1, "name": "Alice", "age": 25, "active": true},{"id": 2, "name": "Bob", "age": 30, "active": false},{"id": 3, "name": "Charlie", "age": 28, "active": true}
]

        需求:找到 id=2 的字典,将其 age 修改为 31,同时将 active 改为 true

import json# 1. 读取 JSON 文件(列表套字典结构,解析后是 Python 列表)
with open("users.json", "r", encoding="utf-8") as f:data_list = json.load(f)  # data_list 是一个包含字典的列表# 2. 遍历列表,查找目标字典并修改值
for item in data_list:# 假设通过 "id" 定位目标字典(可根据实际条件调整)if item.get("id") == 2:  # 找到 id=2 的字典item["age"] = 31  # 修改 age 的值item["active"] = True  # 修改 active 的值break  # 找到后退出循环,提高效率# 3. 将修改后的列表写回 JSON 文件
with open("users.json", "w", encoding="utf-8") as f:json.dump(data_list, f, indent=2, ensure_ascii=False)

潜在问题及优化方案:

        在处理 “列表套字典” 结构的 JSON 数据时,遍历列表是最直接的方式,但对于数据量极大的场景(如几万 / 几十万条数据),遍历的效率确实可能偏低。此时可以通过优化查找逻辑借助第三方库提升效率,具体方法如下:

方法 1:用 “字典映射” 预处理,将列表转为索引字典(推荐)

        如果列表中的字典有唯一标识键(如id),可以先将列表转换为以该标识为键的字典(相当于建立 “索引”),后续查找时直接通过键获取目标字典,时间复杂度从遍历的O(n)降至O(1)

示例(基于之前的users.json):
import json# 1. 读取数据并构建索引字典(以id为键)
with open("users.json", "r", encoding="utf-8") as f:data_list = json.load(f)# 构建映射:{id: 对应的字典}
id_to_item = {item["id"]: item for item in data_list}# 2. 直接通过id查找并修改(无需遍历)
target_id = 2
if target_id in id_to_item:id_to_item[target_id]["age"] = 31id_to_item[target_id]["active"] = True# 3. 写回文件(原列表已被修改,因为字典是引用类型)
with open("users.json", "w", encoding="utf-8") as f:json.dump(data_list, f, indent=2, ensure_ascii=False)

优势

  • 预处理一次后,后续多次查找 / 修改均为O(1),适合频繁操作的场景。
  • 不改变原列表结构,写回文件时直接用原列表即可(因为字典是引用类型,修改映射中的字典会同步影响原列表)。

方法 2:用列表推导式 / 生成器表达式简化查找(适合单次查找)

        如果只需单次查找,可通过列表推导式或生成器表达式快速定位目标,代码更简洁(本质仍是遍历,但写法更高效)。

示例:
import jsonwith open("users.json", "r", encoding="utf-8") as f:data_list = json.load(f)# 用生成器表达式查找第一个符合条件的字典(找到即停止)
target = next((item for item in data_list if item["id"] == 2), None)
if target:target["age"] = 31target["active"] = Truewith open("users.json", "w", encoding="utf-8") as f:json.dump(data_list, f, indent=2, ensure_ascii=False)

优势

  • 借助next()和生成器表达式,找到目标后会立即停止遍历(类似带break的循环),避免多余操作。
  • 代码更简洁,适合一次性查询修改。

方法 3:借助第三方库(如pandas)处理结构化数据

        如果 JSON 数据是结构化的(如每个字典的键相同,类似表格),可以用pandas将其转为 DataFrame,通过类似 SQL 的查询语法快速定位和修改,适合大数据量场景。

示例:
import json
import pandas as pd# 1. 读取JSON并转为DataFrame
with open("users.json", "r", encoding="utf-8") as f:data_list = json.load(f)
df = pd.DataFrame(data_list)# 2. 定位并修改(通过条件筛选)
df.loc[df["id"] == 2, ["age", "active"]] = [31, True]# 3. 转回列表并写回文件
updated_list = df.to_dict("records")  # 转为列表套字典
with open("users.json", "w", encoding="utf-8") as f:json.dump(updated_list, f, indent=2, ensure_ascii=False)

优势

  • pandas底层用 C 实现,处理大数据量(如 10 万 + 条)时效率远高于纯 Python 遍历。
  • 支持复杂条件查询(如多键组合筛选),语法更直观。

注意:需要安装pandaspip install pandas),适合数据结构化程度高的场景。

总结:如何选择?

  1. 小数据量(几百条以内):直接遍历或生成器表达式即可,代码简单,效率差异可忽略。
  2. 大数据量 + 有唯一标识:优先用 “字典映射” 预处理,单次预处理O(n),后续操作O(1),性价比最高。
  3. 大数据量 + 结构化数据:用pandas,适合需要频繁进行复杂查询和修改的场景。

本质上,除了建立索引(方法 1)和借助底层优化的库(方法 3),其他方式仍依赖遍历,但通过 “提前终止”(如breaknext())可减少无效操作,效率差异主要体现在数据量极大的场景中。

http://www.dtcms.com/a/597528.html

相关文章:

  • 广州市官网网站建设公司详情页模板尺寸
  • 深度学习_神经网络_损失函数基础
  • Centos7.9创建新用户,授权远程登录,禁用root远程登录
  • 柔性软风管-连续测量十分便利
  • 手机网站优化排名首页浏阳seo
  • 辽宁住房与城乡建设厅网站网站单子
  • python类的内置函数
  • chrome的Network上经常看不到网络请求,解决方案
  • 复现------
  • 专业网站建设制作多少钱江门网站建设技术托管
  • 基于MATLAB的POD-DMD联合分析实现方案
  • saas 平台架构做网站简述建设一个网站的具体步骤6
  • 均安公司网站建设wordpress tag做专题
  • 邯郸手机网站开发价格怎样找做淘宝客的网站
  • Linux系统编程——进程通信之无名管道
  • 基于springboot高校办公室行政事务管理系统【带源码和文档】
  • Amplitude使用记录
  • 云南建网站需要多少钱莱芜雪野湖别墅
  • 慢查询日志在性能优化中的价值
  • ADB点击实战-做一个自动点广告播放领金币的脚本app(中)
  • 网站优化关键词排名wampserver做网站
  • 中国建设银行网站首不能制作网页的软件有哪些
  • PostgreSQL insert 偶发变慢的原因分析 —— 从缓存击穿到系统 I/O
  • 简单的网站php开发教程高质量外链购买
  • MatplotlibDeprecationWarning
  • 织梦如何做网站地图西双版纳傣族自治州
  • 教程网站建设南宁制作企业网站
  • 刷题日常 5 二叉树最大深度
  • 信刻创新型近线+离线安全存储归档策略,保障电子档案全生命周期管理
  • Flutter for HarmonyOS开发指南(九):测试、调试与质量保障体系