数据库中JSON数组ID的高效查询与应用

碧海醫心
发布: 2025-11-26 08:27:11
原创
322人浏览过

数据库中json数组id的高效查询与应用

本文详细介绍了如何从数据库存储的JSON数组字段中提取项目ID,并利用SQL的`IN`子句执行高效的数据查询。通过将JSON字符串解析为PHP数组,构建ID列表,然后使用单个优化后的SQL查询,避免了传统循环查询带来的性能瓶颈,显著提升了数据检索效率。

在现代Web应用开发中,将复杂数据结构(如ID列表)以JSON格式存储在数据库字段中是一种常见的做法。例如,在一个用户账户表中,某个字段可能存储了用户收藏的商品ID列表。然而,当需要根据这些JSON数组中的ID来查询相关联的实体(如商品详情)时,如何高效地执行查询成为了一个关键问题。本文将深入探讨如何优雅且高效地解决这一挑战。

理解低效的循环查询模式

许多开发者在初次遇到此类问题时,可能会倾向于采用一种直观但效率低下的方法:首先从数据库中获取包含JSON数组的记录,然后遍历解析后的JSON数组,为数组中的每个ID单独执行一次数据库查询。

以下是一个典型的低效查询示例,它展示了这种“N+1查询”模式的潜在问题:

// 步骤1:从 accounts 表获取包含 JSON 格式 bookmarks 的记录
$sql = "SELECT bookmarks FROM `accounts` WHERE firstname='".$firstname."' && lastname='".$lastname."' ";
$sth = mysqli_query($conn, $sql);

$all_bookmarks_json = [];
while($r = mysqli_fetch_assoc($sth)) {
    // 假设 $r['bookmarks'] 包含一个 JSON 字符串,例如 '["101","105","203"]'
    $all_bookmarks_json[] = $r['bookmarks'];
}

// 步骤2:解析 JSON 并收集所有 ID
$all_extracted_ids = [];
foreach($all_bookmarks_json as $bookmark_json) {
    $decoded_bookmarks = json_decode($bookmark_json, true);
    if (is_array($decoded_bookmarks)) {
        foreach($decoded_bookmarks as $id) {
            $all_extracted_ids[] = $id;
        }
    }
}

// 步骤3:为每个 ID 执行单独的数据库查询(低效操作)
foreach($all_extracted_ids as $id_to_query ){
    $bookmark_item_sql = "SELECT * FROM books WHERE id='".$id_to_query."'"; // 每次循环都执行一个新查询
    $bookselect = mysqli_query($conn, $bookmark_item_sql);
    while($row = mysqli_fetch_assoc($bookselect)) { 
        // 处理查询结果
        print_r($row);
    }
}
登录后复制

这种模式的缺点显而易见:

  1. 性能瓶颈: 每次循环都会产生一次新的数据库连接和查询开销。当$all_extracted_ids中的ID数量增多时,系统性能会急剧下降。
  2. 资源消耗: 频繁的数据库交互会占用大量服务器资源,增加数据库服务器的负载。
  3. 代码复杂性: 逻辑分散,难以维护和优化。

优化方案:JSON解析与SQL IN 子句

为了克服上述问题,最佳实践是先将所有需要查询的ID收集起来,然后利用SQL的IN子句一次性查询所有匹配的记录。这种方法将多次数据库往返减少为一次,从而显著提升效率。

PHP的使用技巧集
PHP的使用技巧集

PHP 独特的语法混合了 C、Java、Perl 以及 PHP 自创新的语法。它可以比 CGI或者Perl更快速的执行动态网页。用PHP做出的动态页面与其他的编程语言相比,PHP是将程序嵌入到HTML文档中去执行,执行效率比完全生成HTML标记的CGI要高许多。下面介绍了十个PHP高级应用技巧。 1, 使用 ip2long() 和 long2ip() 函数来把 IP 地址转化成整型存储到数据库里

PHP的使用技巧集 440
查看详情 PHP的使用技巧集

以下是实现这一优化方案的详细步骤和代码示例:

步骤1:获取并解析JSON数据

首先,从数据库中检索包含JSON数组的字段。然后,使用PHP内置的json_decode()函数将其转换为PHP数组。

// 假设 $firstname 和 $lastname 已经通过安全方式获取,并已进行转义或使用预处理
// 为防止 SQL 注入,这里使用 mysqli_real_escape_string 进行示例转义
$escaped_firstname = mysqli_real_escape_string($conn, $firstname);
$escaped_lastname = mysqli_real_escape_string($conn, $lastname);

$sql = "SELECT bookmarks FROM `accounts` WHERE firstname='" . $escaped_firstname . "' AND lastname='" . $escaped_lastname . "' ";
$sth = mysqli_query($conn, $sql);

if (!$sth) {
    die("查询 accounts 表失败: " . mysqli_error($conn));
}

$all_extracted_ids = []; // 用于存储从所有JSON数组中提取的ID

while($r = mysqli_fetch_assoc($sth)) {
    // 确保 'bookmarks' 键存在且不是null
    if (isset($r['bookmarks']) && $r['bookmarks'] !== null) {
        // 将JSON字符串解码为PHP数组。true 参数表示将JSON对象解码为关联数组
        $decoded_bookmarks = json_decode($r['bookmarks'], true);

        // 检查解码是否成功且结果是一个数组
        if (is_array($decoded_bookmarks)) {
            // 遍历解码后的数组,将每个ID添加到总ID列表中
            foreach($decoded_bookmarks as $id){
                // 确保 ID 是有效的,例如非空
                if (!empty($id)) {
                    $all_extracted_ids[] = $id;
                }
            }
        } else {
            // 处理JSON解码失败的情况,例如记录日志或抛出异常
            error_log("JSON解码失败或结果不是数组: " . $r['bookmarks']);
        }
    }
}
登录后复制

说明:

  • json_decode($r['bookmarks'], true):将JSON字符串解析为PHP关联数组。如果JSON字符串格式不正确,json_decode可能返回null。
  • is_array($decoded_bookmarks):检查json_decode是否成功返回一个数组,这是必要的错误检查。

步骤2:构建SQL IN 子句的ID字符串

一旦我们有了一个包含所有待查询ID的扁平数组($all_extracted_ids),就可以使用PHP的implode()函数将其转换为SQL IN子句所需的逗号分隔字符串。

$id_list_for_sql = "''"; // 默认值,如果 all_extracted_ids 为空,则生成一个不匹配任何记录的 IN 子句

if (!empty($all_extracted_ids)) {
    // 对每个 ID 进行转义,以防止 SQL 注入。
    // 如果 ID 是整数类型,则不需要单引号包裹,但仍建议转义以防万一。
    $escaped_ids = array_map(function($id) use ($conn) {
        return mysqli_real_escape_string($conn, $id);
    }, $all_extracted_ids);

    // 如果 ID 是字符串类型,需要用单引号包裹并用逗号连接
    $id_list_for_sql = "'" . implode("','", $escaped_ids) . "'";

    // 如果 ID 确定是整数类型,则不需要单引号
    // $id_list_for_sql = implode(",", $escaped_ids);
}
登录后复制

以上就是数据库中JSON数组ID的高效查询与应用的详细内容,更多请关注php中文网其它相关文章!

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号