文章 专题 AI工具 学习 下载 问答 源码 最近更新
PHP
会员中心 讲师中心 微信公众号
首页 > 数据库 > mysql教程 > 正文

如何更快速的把数据插入Mysql

php中文网
发布： 2016-06-07 14:57:17
原创
1377人浏览过

1.拼SQL语句，insert后面带1000个value一次性提交； 2.使用连接池，保持长连接插入； 3.更换Mysql的存储引擎为Inforbright，然后把数据做成文本，批量导入 4.使用队列，保持最高插入速度 有没人有其他更好的方法，最近有130G每天都文件要入库分析，期待指引密

1.拼SQL语句，insert后面带1000个value一次性提交；
2.使用连接池，保持长连接插入；
3.更换Mysql的存储引擎为Inforbright，然后把数据做成文本，批量导入
4.使用队列，保持最高插入速度

有没人有其他更好的方法，最近有130G每天都文件要入库分析，期待指引密经。

源码与演示：源码出处 演示出处

LOAD DATA INFILE 'F:m_mp3\data.txt' IGNORE INTO TABLE music.album CHARACTER SET utf8  FIELDS TERMINATED BY ',' lines terminated by '
' (album_id,album_name,singer_name,publish_time,song_count);
登录后复制
最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移，垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是，许多工具可以让 Windows 保持平稳运行。

下载
相关标签：
mysql
来源：php中文网
收藏 点赞
上一篇：turn on 'xp_cmdshell' 下一篇：获取两个时间段之间相差多少小时多少分钟
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
MySQL中聚合函数汇总 聚合函数在统计查询中的实际案例 要统计记录数量用COUNT()函数，计算总和与平均值用SUM()和AVG()，查找极值用MAX()和MIN()，结合GROUPBY实现分组统计。1.COUNT(*)统计所有行，COUNT(字段名)仅统计非NULL值；2.SUM(字段)求总和，AVG(字段)求平均值，仅适用于数值型；3.MAX()和MIN()可获取最大值与最小值，支持数值、日期、字符串类型；4.使用GROUPBY按字段分组后聚合，结合HAVING筛选分组结果，实现复杂统计分析。
2025-06-19 10:36:02
703
mysql中怎么创建数据表格 mysql数据表创建方法详解 在MySQL中创建数据表的步骤包括：1)使用CREATETABLE语句定义表结构；2)选择合适的数据类型，如INT、VARCHAR等；3)设置字段属性，如AUTO_INCREMENT、NOTNULL、UNIQUE；4)创建索引以优化查询性能；5)使用EXPLAIN命令优化表设计和查询。
2025-06-19 09:57:02
957
MySQL如何实现条件删除 WHERE子句结合多条件技巧 MySQL中实现条件删除的核心方法是使用DELETEFROM语句配合WHERE子句筛选数据，编写高效删除语句的关键在于优化WHERE子句。1.尽量使用索引字段作为筛选条件，避免使用OR连接多个非索引字段；2.多表删除时可用JOIN结合WHERE条件；3.定期使用OPTIMIZETABLE维护索引。常见错误包括忘记WHERE子句、误用运算符、外键约束和死锁问题，应通过SELECT验证、合理选择运算符、设置CASCADE或调整事务控制来避免。对于复杂逻辑，可使用存储过程封装删除操作，如定义delet
2025-06-18 23:48:02
682
MySQL中慢查询日志 慢查询分析与优化实战技巧 要优化MySQL性能，慢查询日志是关键切入点。1.开启慢查询日志可在配置文件中设置slow_query_log=1、指定日志路径、设定long_query_time（如1秒）并记录未使用索引的SQL；也可在运行时用SETGLOBAL命令动态开启。2.查看日志需关注Query_time（执行耗时）、Lock_time（锁等待时间）、Rows_examined（扫描行数）和Rows_sent（返回行数），这些指标反映SQL性能状况。3.常见慢查询原因包括：缺少合适索引导致全表扫描、索引使用不当（如对
2025-06-18 20:09:02
732
mysql如何实现数据归档？归档工具有哪些？ MySQL数据归档主要有四种方式。1.使用SQL语句手动归档，通过INSERT和DELETE迁移历史数据，适合小规模场景但需注意事务控制、索引影响和备份确认；2.利用事件调度器实现定时自动归档，可设定周期任务并建议配合分区使用以减少性能影响；3.结合时间分区表进行归档，提升查询效率且操作整个分区更高效，但存在分区键设计限制；4.借助第三方工具如pt-archiver或mysqldump，前者支持边归档边删除并控制资源占用，后者适用于低频小规模归档。根据数据量和业务需求选择合适方法，小型项目可用S
2025-06-18 17:09:02
135
mysql中的视图用处大吗 视图应用场景分析 MySQL中的视图用处很大。1)视图可以简化复杂查询，提高代码可读性和可维护性。2)视图能控制数据访问权限，增强安全性。3)但视图每次访问需重新执行底层查询，可能影响性能，且更新操作受限。
2025-06-18 16:09:01
860
MySQL怎样避免全表扫描 索引覆盖与查询重写方案 避免MySQL全表扫描的核心方法包括：1.使用EXPLAIN分析查询计划，关注type列是否为ALL以识别全表扫描；2.创建合适的索引，如针对高频查询字段建立单列或复合索引；3.优化WHERE子句，避免使用函数或表达式导致索引失效；4.限制返回数据量，使用LIMIT减少不必要的数据检索；5.定期维护索引，通过OPTIMIZETABLE整理碎片；6.考虑分区表以缩小扫描范围；7.利用索引覆盖，创建包含所有查询字段的复合索引并验证Extra列是否显示Usingindex；8.重写查询语句，如用JOI
2025-06-18 14:21:01
316
MySQL怎样批量插入数据 LOAD DATA与多值INSERT对比 MySQL批量插入数据主要有LOADDATA和多值INSERT两种方式，LOADDATA适合大量数据且格式规范的场景，速度快但灵活性差；多值INSERT更灵活但性能较慢。具体选择需根据数据量、格式及对速度与灵活性的需求权衡决定。使用LOADDATAINFILE时，需确保用户有FILE权限、路径正确、分隔符设置准确、处理表头行并注意编码问题。优化多值INSERT的关键在于控制VALUES数量，分批次插入、禁用索引后再重建、使用预处理语句均可提升性能。小数据量、需复杂转换或存在触发器的情况下应避免使
2025-06-18 14:06:02
1011
mysql中in和or的区别 mysql两种条件查询效率 在MySQL中，IN和OR的选择取决于数据量和使用场景：1)IN更适合处理大量数据，执行效率高；2)OR适用于少量值和需要高可读性的情况。
2025-06-18 12:06:02
998
mysql导入sql文件没有表 解决导入失败的方法 处理MySQL导入SQL文件时，如果没有表被创建或导入失败，可以通过以下步骤解决：1.检查并转换文件格式，使用dos2unix工具；2.确保MySQL用户有足够权限，使用SHOWGRANTSFORCURRENT_USER;命令；3.检查SQL文件中语句顺序，先创建表再插入数据；4.使用mysql命令行工具的--verbose选项查看详细错误信息；5.临时增加max_allowed_packet值，SETGLOBALmax_allowed_packet=10010241024;6.调整SQL模式，
2025-06-18 11:15:01
768
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
app下载
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部