当前位置: 首页 > news >正文

Cyberchef实用功能之-json line格式文件美化和查询

本文将介绍一下如何使用cyberchef对json line格式数据进行美化方便阅读,以及json line格式数据的批量查询操作。

之前的文章介绍了json格式数据的美化和查询,即Cyberchef实用功能之-json解析美化和转换,Cyberchef实用功能之-批量提取json数据文件的字段内容,详见这里和这里

本文的目录结构如下,可以直接跳转到对应的章节查看:
在这里插入图片描述

json line介绍

在将json格式的数据存储为文件的时候通常会存储为json line的格式,即每一行是一个json的object。关于json和jsonl的解释询问deepseek如下:
在这里插入图片描述
可以看到由于写日志、流式数据存储的原因,jsonl格式的文件更为的常见。

测试数据

为了后续演示对于jsonl格式数据的美化和查询,构造如下的测试数据进行说明:

{"作者":"村中少年","名称":"Cyberchef 从入门到精通教程","URL":"https://blog.csdn.net/javajiawei/category_12724757.html","分类":"网络安全"}
{"作者":"村中少年","名称":"脱敏Deepseek/Chatgpt等AI大模型中的敏感数据","URL":"https://blog.csdn.net/javajiawei/category_12920978.html"}
{"作者":"村中少年","名称":"网络攻防协议实战分析","URL":"https://blog.csdn.net/javajiawei/category_10243824.html"}
{"作者":"村中少年","名称":"Wireshark从入门到精通","URL":"https://blog.csdn.net/javajiawei/category_9583097.html"}

jsonl美化

直接使用cyberchef的json beautify操作进行解析,会提示错误,如下:
在这里插入图片描述
原因是json beautify的输入为json格式的object,对于jsonl是无法解析的。

这个时候就需要用到cyberchef的其他操作来辅助处理每一行的数据,用到的就是fork操作。关于fork操作的详细用法,参考本专栏之前的文章,《Cyberchef基础概念之-分叉合并-fork/merge》,这里。

使用fork和json beautify组合操作解析jsonl格式的数据如下:
在这里插入图片描述
可以看到fork会逐行读取数据然后交由json beautify进行美化处理输出。

jsonl查询

同理使用jpath操作也是无法对于jsonl格式数据直接查询,如下:
在这里插入图片描述
配合fork操作,如下:
在这里插入图片描述
当然关于jpath操作的更多用法,详见《Cyberchef实用功能之-批量提取json数据文件的字段内容》,这里,本文不在赘述。

错误案例

但是有的时候会遇到如下的错误提示:
在这里插入图片描述
原因在于jsonl文件最后一行为空,这个时候fork操作读取每一行喂给jpath操作,但是最后一行不是json格式,因此出现错误。这个时候去除最后一行的空行即可成功的解析。

当然你也可以不修改源文件,探索cyberchef的其他操作进行组合,例如使用head 只取前若干行的数据,避免最后非json格式的数据,如下:
在这里插入图片描述
希望上述的内容对于你在工作,学习的过程中对于你json line数据的操作提供帮助。

本文为CSDN村中少年原创文章,未经允许不得转载,博主链接这里。

相关文章:

  • 数据治理之数据仓库
  • 车辆模型——运动学模型
  • Excel(函数进阶篇):FILTER函数全解读、XLOOKUP函数全解读、UNIQUE函数、数组与数组公式
  • 企业数据孤岛的纠结与恩怨
  • 使用Pygame实现记忆拼图游戏
  • 图像滤波中常用滤波器的相位响应——不是只有零相位滤波器
  • Java 大视界 -- Java 大数据分布式计算中的通信优化与网络拓扑设计(145)
  • 家庭带宽运行PCDN
  • 关于CNN,RNN,GAN,GNN,DQN,Transformer,LSTM,DBN你了解多少
  • 每日一题--C与C++的差别
  • ROS篇---坐标系(直角坐标系、圆柱坐标系、球坐标系)
  • 记一次发短信接口分析
  • RISC-V AIA学习1----介绍
  • 【Agent】Dify Docker 安装问题 INTERNAL SERVER ERROR
  • 一、对42步进电机使用演示记录
  • 【Pandas】pandas Series plot.barh
  • 【操作系统】共享数据的竞争问题
  • Python预训练模型实现俄语音频转文字
  • 2025年渗透测试面试题总结- 某亭-安全研究员(题目+回答)
  • Redis设计与实现-底层实现
  • 中国巴西民间推动建立经第三方验证的“森林友好型”牛肉供应链
  • 缺字危机:一本书背后有多少“不存在”的汉字?
  • 湖北石首市委副书记、市长付勇接受审查调查
  • 中美会谈前都发生了什么?美方为何坐不住了?
  • 著名文物鉴赏家吴荣光逝世,享年78岁
  • 当我们提起拉动消费时,应该拉动什么消费?