使用 Josson 库查找 JSON 文件中的重复键值对-java教程-PHP中文网

使用 Josson 库查找 JSON 文件中的重复键值对

碧海醫心

发布： 2025-09-22 12:20:01

原创

243人浏览过

使用 Josson 库查找 JSON 文件中的重复键值对

本教程旨在解决如何在复杂的 JSON 结构中高效识别并提取跨多个对象存在的重复键值对。我们将介绍并演示 Josson 这一强大的 Java 库，通过其简洁的查询语法，实现对 JSON 数据的深度遍历、转换和过滤，从而自动化地发现并输出所有重复的键值对，避免手动遍历的繁琐与低效。

识别 JSON 中重复键值对的挑战

在处理大型或结构复杂的 json 数据时，一个常见需求是找出在不同 json 对象中重复出现的键值对。例如，在一个包含多个顶层对象的 json 文件中，我们可能需要识别出哪些 {"key": "value"} 组合在至少两个顶层对象中都存在。传统的手动遍历和使用 hashmap 进行比对的方法虽然可行，但对于深层嵌套或大规模数据，代码会变得冗长且效率低下。

考虑以下 JSON 结构：

{
    "object1": {
        "key_1": "value_1",
        "key_2": "value_2",
        "key_3": "value_3",
        "key_5": "value_5",
        "key_6": "value_6"
    },
    "object2": {
        "key_1": "value_1",
        "key_2": "value_2",
        "key_4": "value_4",
        "key_5": "value_5"
    }
}

登录后复制

在此示例中，"key_1": "value_1"、"key_2": "value_2" 和 "key_5": "value_5" 在 object1 和 object2 中均有出现，我们希望能够自动检测并提取这些重复项。

引入 Josson 库

为了高效地解决这一问题，我们可以利用 Josson 这一强大的 Java 库。Josson 是一个用于 JSON 转换和查询的开源库，它提供了类似于 XPath 或 JQ 的简洁查询语法，能够轻松地对 JSON 数据进行深度遍历、过滤、映射和分组操作。

1. Josson 库的集成

首先，你需要在你的 Java 项目中引入 Josson 库。如果你使用 Maven，可以在 pom.xml 中添加以下依赖：

<dependency>
    <groupId>com.github.octomix</groupId>
    <artifactId>josson</artifactId>
    <version>1.4.0</version> <!-- 请检查最新版本 -->
</dependency>

登录后复制

2. 实现重复键值对的检测与提取

Josson 的强大之处在于其富有表现力的查询语言。通过一条精心构造的查询语句，我们可以完成复杂的 JSON 数据操作。以下是使用 Josson 查找重复键值对的完整示例代码：

标书对比王

标书对比王是一款标书查重工具，支持多份投标文件两两相互比对，重复内容高亮标记，可快速定位重复内容原文所在位置，并可导出比对报告。

查看详情

import com.octomix.josson.Josson;
import com.fasterxml.jackson.databind.JsonNode;

public class JsonDuplicateFinder {

    public static void main(String[] args) {
        // 示例 JSON 字符串
        String jsonString = "{" +
            "    \"object1\": {" +
            "        \"key_1\": \"value_1\"," +
            "        \"key_2\": \"value_2\"," +
            "        \"key_3\": \"value_3\"," +
            "        \"key_5\": \"value_5\"," +
            "        \"key_6\": \"value_6\"" +
            "    }," +
            "    \"object2\": {" +
            "        \"key_1\": \"value_1\"," +
            "        \"key_2\": \"value_2\"," +
            "        \"key_4\": \"value_4\"," +
            "        \"key_5\": \"value_5\"" +
            "    }" +
            "}";

        // 1. 将 JSON 字符串反序列化为 Josson 对象
        Josson josson = Josson.fromJsonString(jsonString);

        // 2. 构建 Josson 查询语句，查找重复的键值对
        // 查询逻辑解释：
        //   - `**`: 匹配所有后代节点（即所有内层对象中的键值对）。
        //   - `.entries()`: 将每个对象转换为其键值对列表（Entry 集合）。
        //   - `.map(key::value)`: 将每个 Entry 映射成一个表示键值对的 JSON 对象，例如 {"key_1":"value_1"}。
        //   - `.group(obj:?)`: 根据这些映射后的键值对对象进行分组。相同的键值对会被分到同一组。
        //   - `.[elements.size()>1]`: 过滤分组结果，只保留那些包含多于一个元素的组。这意味着这些键值对至少出现了两次。
        //   - `*.obj`: 从过滤后的组中提取出代表重复键值对的原始对象。
        JsonNode duplicateKeyValues = josson.getNode(
            "**.entries().map(key::value).group(obj:?).[elements.size()>1]*.obj"
        );

        // 3. 打印结果
        System.out.println("检测到的重复键值对：");
        System.out.println(duplicateKeyValues.toPrettyString());
    }
}

登录后复制

3. 运行结果

执行上述 Java 代码，你将得到以下输出：

检测到的重复键值对：
[ {
  "key_1" : "value_1"
}, {
  "key_2" : "value_2"
}, {
  "key_5" : "value_5"
} ]

登录后复制

这个输出精确地列出了在 object1 和 object2 中都存在的键值对，完美地解决了我们的需求。

注意事项与总结

查询语法的灵活性： Josson 的查询语法非常强大和灵活，可以处理各种复杂的 JSON 转换和查询场景。掌握其核心概念（如 ** 遍历、.entries()、.map()、.group() 和条件过滤 []）是高效使用的关键。
性能考量： 对于极大规模的 JSON 文件，虽然 Josson 提供了高级抽象，但仍需注意查询的复杂性可能对性能造成影响。在生产环境中，建议对关键查询进行性能测试。
错误处理： 在实际应用中，应考虑 JSON 字符串解析失败等异常情况，并添加相应的错误处理逻辑。
Josson 资源： Josson 库的官方 GitHub 仓库（https://www.php.cn/link/6792ca026fefaf3a63297638dca900e9）提供了更详细的文档和更多示例，建议查阅以深入了解其功能。