0

0

php查询数据怎么去重_distinct去除重复记录用法【教程】

看不見的法師

看不見的法師

发布时间:2026-01-01 13:54:09

|

634人浏览过

|

来源于php中文网

原创

核心应在SQL层用DISTINCT或GROUP BY去重,PHP仅执行查询;DISTINCT适用于只需唯一值且不关心其他字段的场景,GROUP BY则支持聚合计算;避免用array_unique()处理全量数据,以防性能浪费。

php查询数据怎么去重_distinct去除重复记录用法【教程】

PHP 查询数据去重,核心不在 PHP 本身,而在 SQL 层用 DISTINCTGROUP BY 控制结果集。PHP 只负责执行查询、获取结果,不承担“去重逻辑”的计算职责。

什么时候该用 DISTINCT

当你只需要「某列(或几列组合)的唯一值」,且不关心原始行的其他字段时,DISTINCT 最直接。比如查所有不重复的用户城市:

SELECT DISTINCT city FROM users;

注意:DISTINCT 作用于整行结果。下面这句查的是 namecity 组合去重,不是只对 name 去重:

SELECT DISTINCT name, city FROM users;
  • 如果两行 name 相同但 city 不同,它们都会保留
  • DISTINCT 不能配合 ORDER BY 中未出现在 SELECT 列表里的字段(MySQL 5.7+ 严格模式会报错)
  • 性能上,DISTINCT 本质是 GROUP BY + 隐式排序,大数据量时可能触发临时表和文件排序

GROUP BYDISTINCT 更灵活的场景

当你要去重的同时,还要聚合信息(比如每个城市的用户数、最新注册时间),就必须用 GROUP BY

立即学习PHP免费学习笔记(深入)”;

Pi智能演示文档
Pi智能演示文档

领先的AI PPT生成工具

下载
SELECT city, COUNT(*) AS user_count, MAX(created_at) AS last_login
FROM users
GROUP BY city;
  • GROUP BY 允许你在去重维度(如 city)基础上,安全使用聚合函数COUNTMAXMIN 等)
  • 不能在 SELECT 中写非分组字段(除非用聚合函数包裹),否则 MySQL 8.0+ 默认拒绝执行
  • 若只想去重又不想排序,可加 ORDER BY NULL 避免隐式排序开销

PHP 中不要用 array_unique() 对查询结果去重

这是常见误区:先 SELECT * 拿回全部数据,再用 PHP 的 array_unique() 处理。问题很实际:

  • 数据库本可一步返回 100 行,你却拉回 10000 行再过滤,浪费带宽和内存
  • array_unique() 默认只比较值,对多维数组需用 SORT_REGULAR 或自定义回调,极易出错
  • 无法利用数据库索引加速去重,纯靠 PHP 单线程遍历,延迟翻倍
  • 若字段含 NULL、浮点数、对象等,array_unique() 行为不可控

真需要 PHP 层后处理时,怎么安全去重?

极少数情况(比如合并多个查询结果、或业务逻辑强制要求 PHP 计算),必须用 PHP 去重,请按字段组合构造唯一键:

$unique = [];
foreach ($rows as $row) {
    $key = $row['user_id'] . '|' . $row['product_id'];
    if (!isset($unique[$key])) {
        $unique[$key] = $row;
    }
}
$deduped = array_values($unique);
  • 避免直接对整个 $row 数组做 serialize() 作 key —— 性能差、且顺序敏感
  • 字符串拼接 key 要确保分隔符不会出现在字段值中(或改用 spl_object_hash() + 自定义比较)
  • 若字段可能为 null,先用 strval() 统一转字符串,防止 NULL 拼接出意外结果

真正要警惕的,不是语法怎么写,而是把去重责任从数据库推给 PHP —— 这通常意味着查询设计没想清楚,或者没意识到数据库才是最高效、最可靠的数据筛选引擎。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

1992

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

1312

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

1218

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

948

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

1400

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

1229

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1440

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1303

2023.11.13

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

7

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.6万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 778人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号