讲师中心 微信公众号
AI工具推荐 视频效率加速

Java JSON数据处理:利用Josson库高效提取嵌套结构中的统计信息

酷涛酱_6112

酷涛酱_6112

发布时间:2025-07-31 21:46:01

|

257人浏览过

|

来源于php中文网

原创

Java JSON数据处理:利用Josson库高效提取嵌套结构中的统计信息

本文详细介绍了在Java中如何处理复杂的嵌套JSON数据,并将其转换为扁平化的POJO对象,同时计算特定字段的最小值和最大值。通过引入强大的Josson库进行JSON数据预处理和转换,结合Jackson ObjectMapper进行最终的反序列化,能够极大地简化从层次结构数据中提取聚合统计信息的复杂逻辑,实现高效且精准的数据转换。

在实际的软件开发中,我们经常会遇到结构复杂、层次嵌套的json数据。例如,一个场景是需要从一个包含多层数组和对象的json中,提取出某个元素的统计信息,如其在所有记录中的最小和最大出现次数。传统上,这可能需要编写复杂的循环逻辑,或者自定义jackson反序列化器,这无疑增加了开发难度和代码量。

考虑以下JSON结构,它是一个包含多个内部数组的数组,每个内部数组又包含多个带有word和count字段的对象:

[
  [
    {"word": "china", "count": 0},
    {"word": "kids", "count": 1},
    {"word": "music", "count": 0}
  ],
  [
    {"word": "china", "count": 3},
    {"word": "kids", "count": 0},
    {"word": "music", "count": 2}
  ],
  [
    {"word": "china", "count": 10},
    {"word": "kids", "count": 3},
    {"word": "music", "count": 2}
  ]
]

我们的目标是将其转换为一个扁平化的Java对象列表,每个对象代表一个单词,并包含该单词在所有记录中的最小和最大出现次数。例如,对于单词"china",我们希望得到min=0,max=10。

为此,我们定义一个简单的POJO类Word:

public class Word {
    private String text;
    private Integer min;
    private Integer max;

    // Getters and Setters
    public String getText() { return text; }
    public void setText(String text) { this.text = text; }
    public Integer getMin() { return min; }
    public void setMin(Integer min) { this.min = min; }
    public Integer getMax() { return max; }
    public void setMax(Integer max) { this.max = max; }

    @Override
    public String toString() {
        return String.format("text=%s min=%d max=%d", text, min, max);
    }
}

解决方案:利用Josson进行JSON转换

解决此类问题的关键在于对原始JSON数据进行预处理,将其转换为Jackson可以直接反序列化的结构。Josson是一个强大的Java库,专为JSON查询和转换设计,它提供了一种类似SQL的表达式语言来操作JSON数据。

立即学习“Java免费学习笔记(深入)”;

首先,我们需要在项目中引入Josson库的依赖。如果使用Maven,可以在pom.xml中添加:

git摸鱼周报自动化
git摸鱼周报自动化

生成周报:读取本机 Git 仓库最近一周的提交记录,按项目分类提炼总结,生成标准周报格式,通过微信推送并返回给用户。触发词:周报、weekly report、git总结、提交记录总结、工作周报。

下载
<dependency>
    <groupId>com.github.octomix</groupId>
    <artifactId>josson</artifactId>
    <version>1.3.0</version> <!-- 请替换为最新稳定版本 -->
</dependency>

接下来,我们将使用Josson的查询能力来转换原始JSON。转换的核心思想是:

  1. 扁平化 (Flatten):将多层嵌套的数组结构扁平化为一层。
  2. 分组 (Group):根据需要统计的字段(例如word)进行分组。
  3. 映射与聚合 (Map & Aggregate):对每个分组执行聚合操作(如min和max),并将结果映射到新的结构。

以下是使用Josson进行数据转换的代码示例:

import com.fasterxml.jackson.core.type.TypeReference;
import com.fasterxml.jackson.databind.JsonNode;
import com.fasterxml.jackson.databind.ObjectMapper;
import com.octomix.josson.Josson;

import java.util.List;

public class JsonDataProcessor {

    public static void main(String[] args) throws Exception {
        String jsonInput = "[" +
            "  [" +
            "    {\"word\": \"china\", \"count\": 0}," +
            "    {\"word\": \"kids\", \"count\": 1}," +
            "    {\"word\": \"music\", \"count\": 0}" +
            "  ]," +
            "  [" +
            "    {\"word\": \"china\", \"count\": 3}," +
            "    {\"word\": \"kids\", \"count\": 0}," +
            "    {\"word\": \"music\", \"count\": 2}" +
            "  ]," +
            "  [" +
            "    {\"word\": \"china\", \"count\": 10}," +
            "    {\"word\": \"kids\", \"count\": 3}," +
            "    {\"word\": \"music\", \"count\": 2}" +
            "  ]" +
            "]";

        // 1. 使用Josson加载JSON字符串
        Josson josson = Josson.fromJsonString(jsonInput);

        // 2. 构建Josson查询表达式进行数据转换
        // flatten(): 将所有嵌套数组扁平化为单个数组
        // group(word): 按 'word' 字段进行分组
        // map(text:word, min:elements.min(count), max:elements.max(count)):
        //   映射为新结构,其中 text 取 word 值,min 取分组内 count 的最小值,max 取分组内 count 的最大值
        JsonNode transformedNode = josson.getNode(
            "flatten()" +
            ".group(word)" +
            ".map(text:word, min:elements.min(count), max:elements.max(count))"
        );

        // 3. 使用Jackson ObjectMapper将转换后的JsonNode反序列化为POJO列表
        ObjectMapper objectMapper = new ObjectMapper();
        List<Word> words = objectMapper.convertValue(transformedNode, new TypeReference<List<Word>>() {});

        // 4. 打印结果
        words.forEach(System.out::println);
    }
}

Josson查询表达式解析:

  • flatten(): 这个函数的作用是将多维数组结构扁平化为一维数组。在我们的例子中,它将[[{...}, {...}], [{...}]]转换为[{...}, {...}, {...}, {...}, ...],方便后续的分组操作。
  • group(word): 将扁平化后的所有对象按照它们的word字段值进行分组。例如,所有word为"china"的对象会被分到一组。
  • map(text:word, min:elements.min(count), max:elements.max(count)): 这是最终的映射操作,它为每个分组生成一个新的对象。
    • text:word: 将分组键(即word的值)映射到新对象的text字段。
    • min:elements.min(count): elements代表当前分组中的所有原始对象。elements.min(count)计算这些对象中count字段的最小值,并将其映射到新对象的min字段。
    • max:elements.max(count): 类似地,计算count字段的最大值,并映射到新对象的max字段。

运行结果

执行上述代码,将得到以下输出:

text=china min=0 max=10
text=kids min=0 max=3
text=music min=0 max=2

这正是我们期望的结果,每个单词的最小和最大出现次数都被正确计算并映射到了Word对象中。

注意事项与总结

  • Josson的优势: Josson库极大地简化了复杂JSON数据的转换和聚合逻辑。相比于手动编写嵌套循环或自定义Jackson反序列化器,Josson的表达式语言更简洁、易读,并且功能强大,能够处理各种复杂的查询和转换需求。
  • Jackson的配合: Josson负责将原始的复杂JSON结构转换为Jackson能够直接反序列化的目标结构。Jackson ObjectMapper则负责将Josson处理后的JsonNode转换为具体的Java POJO对象。两者结合,实现了高效且灵活的JSON数据处理流程。
  • 适用场景: 这种方法特别适用于需要从非结构化或半结构化的JSON数据中提取聚合统计信息、进行数据重塑或扁平化的场景。
  • 性能考量: 对于极大规模的JSON数据,应考虑Josson的性能特性,并结合流式处理或其他优化策略。通常情况下,对于中等规模的数据集,Josson的性能表现良好。
  • 替代方案: 虽然Josson提供了优雅的解决方案,但也可以通过以下方式实现:
    • 手动遍历: 使用Jackson将JSON反序列化为List>>,然后手动遍历并聚合数据。这种方式代码量大且易出错。
    • 自定义Jackson Deserializer: 编写一个复杂的JsonDeserializer来处理嵌套结构并计算统计量。这种方式虽然可行,但复杂度较高,尤其是在JSON结构多变时。

综上所述,利用Josson库进行JSON预处理,再结合Jackson进行POJO反序列化,是处理Java中复杂JSON数据转换和统计聚合的一种高效且推荐的方法。它将数据转换逻辑从Java代码中抽象出来,使得代码更清晰、更易维护。

热门AI工具

更多
Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4623

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

951

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1209

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6601

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3343

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6580

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

9041

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1230

2024.04.29

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

40

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
vscode手册
vscode手册

共0课时 | 0人学习

Git 教程
Git 教程

共21课时 | 8.1万人学习

Git版本控制工具
Git版本控制工具

共8课时 | 1.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn