盘点Python中四种读取Json文件和提取Json文件内容的方法

开发 后端
本文基于粉丝针对json文件处理的提问,综合群友们的回答,整理了4种可行的方案,帮助粉丝解决了问题。

[[438357]]

大家好,我是Python进阶者。

前言

前几天在才哥的交流群有个叫【杭州-学生-飞飞飞】的粉丝在群里问了一个json文件处理的问题。

看上去他只需要follower和ddate这两个字段下的对应的值。

我们知道json是一种常见的数据传输形式,所以对于爬取数据的数据解析,json的相关操作是比较重要的,能够加快我们的数据提取效率。

思路

关于这个问题,倒不是很难,群里提出了三个方法,第一个是才哥说的pd处理或者正则表达式,第二个是小编自己提出的json处理,第三个是【成都-IT技术支持-小王】提出的jsonpath,总之方法很多,这里给出4个处理方法,希望下次粉丝们再遇到类似问题的时候,有章可循。

实现过程

1、正则表达式

这个方法可以看看,通过匹配的方法进行提取,代码如下所示:

  1. import re 
  2. import json 
  3.  
  4. file = open('漫画.txt''r', encoding='utf-8'
  5. content = file.readline() 
  6. ddate_result1 = re.findall('"ddate":"(\d+\-\d+\-\d+)"', content) 
  7. ddate_result2 = re.findall('"ddate":"(.*?)"', content) 
  8. follower_result1 = re.findall('"follower":(\d+),"', content) 
  9.  
  10. print(ddate_result1) 
  11. print(ddate_result2) 
  12. print(follower_result1) 

运行之后,可以得到结果:

关于ddate,follower获取的方法肯定还有很多其他写法,这里只是抛砖引玉,欢迎大家多多尝试。

2、jsonpath方法一

关于jsonpath的用法,之前在这篇文章中有提及,感兴趣的小伙伴也可以去看看:数据提取之JSON与JsonPATH。

下面是【成都-IT技术支持-小王】大佬给的代码:

  1. from jsonpath import jsonpath 
  2. import json 
  3.  
  4. """follower和ddate""" 
  5. with open("漫画.txt", encoding="utf-8"as file: 
  6.     file_json = json.loads(file.readline()) 
  7.  
  8. follower = jsonpath(file_json, "$..follower"
  9. ddate = jsonpath(file_json, "$..ddate"
  10. print(follower) 
  11. print(ddate) 

代码运行之后,就会得到想要的数据,如下图所示:

这个..就和xpath里面的//一样,子孙节点,$是根节点。

3、jsonpath方法二

这个是另外一个用法了,小号【皮皮】提供的,直接上代码。

  1. import json 
  2. import jsonpath 
  3.  
  4.  
  5. # obj = json.load(open('罗翔.json''r', encoding='utf-8'))  # 注意,这里是文件的形式,不能直接放一个文件名的字符串 
  6. file = open('漫画.txt''r', encoding='utf-8')  # 注意,这里是文件的形式,不能直接放一个文件名的字符串 
  7. obj = json.loads(file.readline()) 
  8. follower = jsonpath.jsonpath(obj, '$..follower')  # 文件对象   jsonpath语法 
  9.  
  10. ddate = jsonpath.jsonpath(obj, '$..ddate')  # 文件对象   jsonpath语法 
  11. print(follower) 
  12. print(ddate) 

代码运行之后,也可以得到预期的结果。

当然了,如果你的文件本来就是json文件,也可以直接读取,代码类似:

  1. import json 
  2. import jsonpath 
  3.  
  4.  
  5. obj = json.load(open('罗翔.json''r', encoding='utf-8'))  # 注意,这里是文件的形式,不能直接放一个文件名的字符串 
  6. # file = open('罗翔.json''r', encoding='utf-8')  # 注意,这里是文件的形式,不能直接放一个文件名的字符串 
  7. # obj = json.loads(file.readline()) 
  8. follower = jsonpath.jsonpath(obj, '$..follower')  # 文件对象   jsonpath语法 
  9.  
  10. ddate = jsonpath.jsonpath(obj, '$..ddate')  # 文件对象   jsonpath语法 
  11. print(follower) 
  12. print(ddate) 

运行之后,也可以得到预期的结果:

4、jsonpath方法三

这个是群里【深圳-Hua Bro】华博提供的,代码如下:

  1. import json 
  2. import jsonpath 
  3.  
  4. with open("罗翔.txt"'r', encoding="UTF-8"as fr: 
  5.     file_json = eval(fr.read().replace('\n\u200b'''))  # 读取的str转为字典 
  6. follower = jsonpath.jsonpath(file_json, '$..follower')  # 文件对象   jsonpath语法 
  7. ddate = jsonpath.jsonpath(file_json, '$..ddate')  # 文件对象   jsonpath语法 
  8. print(follower) 
  9. print(ddate) 

方法大同小异,运行之后,也可以拿到预取的目标数据,如下图所示。

总结

我是Python进阶者。本文基于粉丝针对json文件处理的提问,综合群友们的回答,整理了4种可行的方案,帮助粉丝解决了问题。这里墙裂给大家推荐jsonpath这个库,感兴趣的小伙伴可以学习学习,下次再遇到json文件提取数据就再也不慌啦!

【编辑推荐】

 

责任编辑:姜华 来源: Python爬虫与数据挖掘
相关推荐

2010-08-02 16:47:46

Flex

2022-09-26 00:21:03

Spring文件项目

2022-01-17 09:01:41

Pythonnc文件Python基础

2018-12-19 14:43:13

Linux命令搜索文件

2021-03-10 10:13:39

爬虫Python代码

2021-08-11 20:17:22

推荐算法系统

2010-03-03 13:50:40

Python文件

2011-08-29 17:32:50

Ubuntu

2015-07-23 14:50:28

大数据

2019-10-24 07:42:28

Java引用GC

2021-07-22 23:27:45

Python工具算法

2011-12-30 13:15:53

Java

2023-08-30 23:41:16

AI框架项目

2020-07-24 09:56:12

React开发数据

2018-11-26 18:45:22

数据可视化绘图可视化

2021-05-10 07:33:10

Java开源工具

2009-12-09 11:03:45

安装Linux

2021-01-15 12:02:25

java 大文件工具

2023-05-22 08:03:28

JavaScrip枚举定义

2023-12-12 08:31:04

文件操作PythonJSON
点赞
收藏

51CTO技术栈公众号