0

0

数据库中JSON数组ID的高效查询与应用

碧海醫心

碧海醫心

发布时间:2025-11-26 08:27:11

|

427人浏览过

|

来源于php中文网

原创

数据库中json数组id的高效查询与应用

本文详细介绍了如何从数据库存储的JSON数组字段中提取项目ID,并利用SQL的`IN`子句执行高效的数据查询。通过将JSON字符串解析为PHP数组,构建ID列表,然后使用单个优化后的SQL查询,避免了传统循环查询带来的性能瓶颈,显著提升了数据检索效率。

在现代Web应用开发中,将复杂数据结构(如ID列表)以JSON格式存储在数据库字段中是一种常见的做法。例如,在一个用户账户表中,某个字段可能存储了用户收藏的商品ID列表。然而,当需要根据这些JSON数组中的ID来查询相关联的实体(如商品详情)时,如何高效地执行查询成为了一个关键问题。本文将深入探讨如何优雅且高效地解决这一挑战。

理解低效的循环查询模式

许多开发者在初次遇到此类问题时,可能会倾向于采用一种直观但效率低下的方法:首先从数据库中获取包含JSON数组的记录,然后遍历解析后的JSON数组,为数组中的每个ID单独执行一次数据库查询。

以下是一个典型的低效查询示例,它展示了这种“N+1查询”模式的潜在问题:

// 步骤1:从 accounts 表获取包含 JSON 格式 bookmarks 的记录
$sql = "SELECT bookmarks FROM `accounts` WHERE firstname='".$firstname."' && lastname='".$lastname."' ";
$sth = mysqli_query($conn, $sql);

$all_bookmarks_json = [];
while($r = mysqli_fetch_assoc($sth)) {
    // 假设 $r['bookmarks'] 包含一个 JSON 字符串,例如 '["101","105","203"]'
    $all_bookmarks_json[] = $r['bookmarks'];
}

// 步骤2:解析 JSON 并收集所有 ID
$all_extracted_ids = [];
foreach($all_bookmarks_json as $bookmark_json) {
    $decoded_bookmarks = json_decode($bookmark_json, true);
    if (is_array($decoded_bookmarks)) {
        foreach($decoded_bookmarks as $id) {
            $all_extracted_ids[] = $id;
        }
    }
}

// 步骤3:为每个 ID 执行单独的数据库查询(低效操作)
foreach($all_extracted_ids as $id_to_query ){
    $bookmark_item_sql = "SELECT * FROM books WHERE id='".$id_to_query."'"; // 每次循环都执行一个新查询
    $bookselect = mysqli_query($conn, $bookmark_item_sql);
    while($row = mysqli_fetch_assoc($bookselect)) { 
        // 处理查询结果
        print_r($row);
    }
}

这种模式的缺点显而易见:

  1. 性能瓶颈: 每次循环都会产生一次新的数据库连接和查询开销。当$all_extracted_ids中的ID数量增多时,系统性能会急剧下降。
  2. 资源消耗: 频繁的数据库交互会占用大量服务器资源,增加数据库服务器的负载。
  3. 代码复杂性: 逻辑分散,难以维护和优化。

优化方案:JSON解析与SQL IN 子句

为了克服上述问题,最佳实践是先将所有需要查询的ID收集起来,然后利用SQL的IN子句一次性查询所有匹配的记录。这种方法将多次数据库往返减少为一次,从而显著提升效率。

ECTouch移动商城系统
ECTouch移动商城系统

ECTouch是上海商创网络科技有限公司推出的一套基于 PHP 和 MySQL 数据库构建的开源且易于使用的移动商城网店系统!应用于各种服务器平台的高效、快速和易于管理的网店解决方案,采用稳定的MVC框架开发,完美对接ecshop系统与模板堂众多模板,为中小企业提供最佳的移动电商解决方案。ECTouch程序源代码完全无加密。安装时只需将已集成的文件夹放进指定位置,通过浏览器访问一键安装,无需对已有

下载

以下是实现这一优化方案的详细步骤和代码示例:

步骤1:获取并解析JSON数据

首先,从数据库中检索包含JSON数组的字段。然后,使用PHP内置的json_decode()函数将其转换为PHP数组。

// 假设 $firstname 和 $lastname 已经通过安全方式获取,并已进行转义或使用预处理
// 为防止 SQL 注入,这里使用 mysqli_real_escape_string 进行示例转义
$escaped_firstname = mysqli_real_escape_string($conn, $firstname);
$escaped_lastname = mysqli_real_escape_string($conn, $lastname);

$sql = "SELECT bookmarks FROM `accounts` WHERE firstname='" . $escaped_firstname . "' AND lastname='" . $escaped_lastname . "' ";
$sth = mysqli_query($conn, $sql);

if (!$sth) {
    die("查询 accounts 表失败: " . mysqli_error($conn));
}

$all_extracted_ids = []; // 用于存储从所有JSON数组中提取的ID

while($r = mysqli_fetch_assoc($sth)) {
    // 确保 'bookmarks' 键存在且不是null
    if (isset($r['bookmarks']) && $r['bookmarks'] !== null) {
        // 将JSON字符串解码为PHP数组。true 参数表示将JSON对象解码为关联数组
        $decoded_bookmarks = json_decode($r['bookmarks'], true);

        // 检查解码是否成功且结果是一个数组
        if (is_array($decoded_bookmarks)) {
            // 遍历解码后的数组,将每个ID添加到总ID列表中
            foreach($decoded_bookmarks as $id){
                // 确保 ID 是有效的,例如非空
                if (!empty($id)) {
                    $all_extracted_ids[] = $id;
                }
            }
        } else {
            // 处理JSON解码失败的情况,例如记录日志或抛出异常
            error_log("JSON解码失败或结果不是数组: " . $r['bookmarks']);
        }
    }
}

说明:

  • json_decode($r['bookmarks'], true):将JSON字符串解析为PHP关联数组。如果JSON字符串格式不正确,json_decode可能返回null。
  • is_array($decoded_bookmarks):检查json_decode是否成功返回一个数组,这是必要的错误检查。

步骤2:构建SQL IN 子句的ID字符串

一旦我们有了一个包含所有待查询ID的扁平数组($all_extracted_ids),就可以使用PHP的implode()函数将其转换为SQL IN子句所需的逗号分隔字符串。

$id_list_for_sql = "''"; // 默认值,如果 all_extracted_ids 为空,则生成一个不匹配任何记录的 IN 子句

if (!empty($all_extracted_ids)) {
    // 对每个 ID 进行转义,以防止 SQL 注入。
    // 如果 ID 是整数类型,则不需要单引号包裹,但仍建议转义以防万一。
    $escaped_ids = array_map(function($id) use ($conn) {
        return mysqli_real_escape_string($conn, $id);
    }, $all_extracted_ids);

    // 如果 ID 是字符串类型,需要用单引号包裹并用逗号连接
    $id_list_for_sql = "'" . implode("','", $escaped_ids) . "'";

    // 如果 ID 确定是整数类型,则不需要单引号
    // $id_list_for_sql = implode(",", $escaped_ids);
}

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

2534

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

1606

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

1499

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

952

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

1416

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

1234

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1445

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1306

2023.11.13

Golang gRPC 服务开发与Protobuf实战
Golang gRPC 服务开发与Protobuf实战

本专题系统讲解 Golang 在 gRPC 服务开发中的完整实践,涵盖 Protobuf 定义与代码生成、gRPC 服务端与客户端实现、流式 RPC(Unary/Server/Client/Bidirectional)、错误处理、拦截器、中间件以及与 HTTP/REST 的对接方案。通过实际案例,帮助学习者掌握 使用 Go 构建高性能、强类型、可扩展的 RPC 服务体系,适用于微服务与内部系统通信场景。

8

2026.01.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.8万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 793人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号