0

0

mysql高速导入导出大容量TXT文本_MySQL

php中文网

php中文网

发布时间:2016-06-01 13:37:27

|

1599人浏览过

|

来源于php中文网

原创

bitsCN.com


mysql高速导入导出大容量txt文本
 

先谈谈如何mysql导入TXT

用到loaddata, MySQL的LOAD DATA INFILE语句用于高速地从一个文本文件中读取行,并装入一个表中。LOAD DATA INFILE语句从一个文本文件中以很高的速度读入一个表中。

 

load data参数配置:

 

SQL代码

LOAD DATA [LOW_PRIORITY] [LOCAL] INFILE 'file_name.txt(file路径)' [REPLACE | IGNORE]  

 INTO TABLE tbl_name  

 [FIELDS  

     [TERMINATED BY '/t']  

     [OPTIONALLY] ENCLOSED BY '']  

     [ESCAPED BY '//' ]] 

 [LINES TERMINATED BY '/n']  

 [IGNORE number LINES]  

 [(col_name,...)]   

 

如果指定LOCAL关键词,从客户本地主机读文件。如果LOCAL没指定,文件必须位于服务器上(远程用的)。(LOCAL在MySQL3.22.6或以后版本中可用。)如果你指定关键词LOW_PRIORITY,LOAD DATA语句的执行被推迟到没有其他客户读取表后。REPLACE和IGNORE关键词控制对现有的唯一键记录的重复的处理。如果你指定REPLACE,新行将代替有相同的唯一键值的现有行。

如果你 指定IGNORE,跳过有唯一键的现有行的重复行的输入。如果你不指定任何一个选项,当找到重复键键时,出现一个错误,并且文本文件的余下部分被忽略时。如果你使用LOCAL关键词从一个本地文件装载数据,服务器没有办法在操作的当中停止文件的传输,因此缺省的行为好像IGNORE被指定一样。LOAD DATA INFILE是SELECT ... INTO OUTFILE的逆操作,SELECT句法。为了将一个数据库的数据写入一个文件,使用SELECT ... INTO OUTFILE,为了将文件读回数据库,使用LOAD DATA INFILE。两个命令的FIELDS和LINES子句的语法是相同的。两个子句是可选的,但是如果指定两个,FIELDS必须在LINES之前。

 

如果你指定一个FIELDS子句,它的每一个子句(TERMINATED BY, [OPTIONALLY] ENCLOSED BY和ESCAPED BY)也是可选的,除了你必须至少指定他们之一。

 

如果你不指定一个FIELDS子句,缺省值与如果你这样写的相同:

 

FIELDS TERMINATED BY '/t' ENCLOSED BY '' ESCAPED BY '//'

 

如果你不指定一个LINES子句,缺省值与如果你这样写的相同:

 

LINES TERMINATED BY '/n' 

换句话说,缺省值导致读取输入时,LOAD DATA INFILE表现如下:

 

在换行符处寻找行边界 

在定位符处将行分进字段 

不要期望字段由任何引号字符封装 

将由“/”开头的定位符、换行符或“/”解释是字段值的部分字面字符 

相反,缺省值导致在写入输出时,SELECT ... INTO OUTFILE表现如下:

 

在字段之间写定位符 

不用任何引号字符封装字段 

使用“/”转义出现在字段中的定位符、换行符或“/”字符 

在行尾处写换行符 

注意,为了写入FIELDS ESCAPED BY '//',对作为一条单个的反斜线被读取的值,你必须指定2条反斜线值。

IGNORE number LINES选项可被用来忽略在文件开始的一个列名字的头:

 

mysql> LOAD DATA INFILE "/tmp/file_name" into table test IGNORE 1 LINES;

 

我建了一个demo表:

 

SQL代码

mysql> use DB_cmd_demo;  

  

多瑞(doreesoft)外贸网店系统
多瑞(doreesoft)外贸网店系统

多瑞外贸网店系统立足于全球化贸易往来的一款外贸类企业用户高端应用电子商务系统软件,帮助企业快速搭建网聚全球商机的电子商务系统。本系统使用纯正的英文,国外用户更容易阅读;多年专业外贸设计经验,熟练掌握美式英语,更符合国外用户考虑和解决问题的逻辑;设计风格、用户体验符合国外用户的习惯;简洁明了的设计风格正是欧美用户的所爱,时时推出新模板、紧跟时尚潮流,供您选择。新增加淘宝数据自动导入,批量上传商品,商

下载

mysql> explain insertdemo;  

+-------+-------------+------+-----+---------+-------+  

| Field | Type        | Null | Key | Default | Extra |  

+-------+-------------+------+-----+---------+-------+  

| code  | varchar(25) | YES  |     | NULL    |       |  

| demo  | varchar(15) | NO   |     |         |       |  

+-------+-------------+------+-----+---------+-------+  

2 rows in set (0.01 sec)  

File_AA.txt文本格式如下:

 

XML/HTML代码

AAVTUALOJJKEC  

AAHRFTXIBLGYG  

AAOAQVLJROSBT  

AACNKRKBZEDPE  

SQL代码

mysql> load data local infile 'd:/File_AA.txt' into table insertdemo (demo);  

Query OK, 4 rows affected (0.00 sec)  

Records: 4  Deleted: 0  Skipped: 0  Warnings: 0  

生成如下:

 

SQL代码

mysql> select * from insertdemo;  

+------+----------------+  

| code | demo           |  

+------+----------------+  

| NULL | AACNKRKBZEDPE  |  

 | ULL | AAOAQVLJROSBT  

 | ULL | AAHRFTXIBLGYG  

 | ULL | AAVTUALOJJKEC  

+------+----------------+  

4 rows in set (0.00 sec)  

再谈谈mysql如何导出到TXT

这是网上的一个demo,在这里贴一下,其实两个用法主要是理解每个参数的用法就OK了

     

 

SQL代码

-- 导出数据为文本文件  

SELECT demo,code  

INTO OUTFILE 'd:/DM_HY_EXPORT.TXT'  

FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY ''''  

LINES TERMINATED BY '/n'  

FROM insertdemo;  

   

FIELDS TERMINATED BY ',' 数据字段间用逗号隔开  

OPTIONALLY ENCLOSED BY '''' 每个字段的数据用单引号括住(注意单引号的表达方法)  

LINES TERMINATED BY '/n' 每条数据结束用'/n'作为换行符。  

 

bitsCN.com

相关专题

更多
ip地址修改教程大全
ip地址修改教程大全

本专题整合了ip地址修改教程大全,阅读下面的文章自行寻找合适的解决教程。

33

2025.12.26

压缩文件加密教程汇总
压缩文件加密教程汇总

本专题整合了压缩文件加密教程,阅读专题下面的文章了解更多详细教程。

18

2025.12.26

wifi无ip分配
wifi无ip分配

本专题整合了wifi无ip分配相关教程,阅读专题下面的文章了解更多详细教程。

46

2025.12.26

漫蛙漫画入口网址
漫蛙漫画入口网址

本专题整合了漫蛙入口网址大全,阅读下面的文章领取更多入口。

91

2025.12.26

b站看视频入口合集
b站看视频入口合集

本专题整合了b站哔哩哔哩相关入口合集,阅读下面的文章查看更多入口。

283

2025.12.26

俄罗斯搜索引擎yandex入口汇总
俄罗斯搜索引擎yandex入口汇总

本专题整合了俄罗斯搜索引擎yandex相关入口合集,阅读下面的文章查看更多入口。

370

2025.12.26

虚拟号码教程汇总
虚拟号码教程汇总

本专题整合了虚拟号码接收验证码相关教程,阅读下面的文章了解更多详细操作。

35

2025.12.25

错误代码dns_probe_possible
错误代码dns_probe_possible

本专题整合了电脑无法打开网页显示错误代码dns_probe_possible解决方法,阅读专题下面的文章了解更多处理方案。

25

2025.12.25

网页undefined啥意思
网页undefined啥意思

本专题整合了undefined相关内容,阅读下面的文章了解更多详细内容。后续继续更新。

72

2025.12.25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 4万人学习

Git 教程
Git 教程

共21课时 | 2.2万人学习

MongoDB 教程
MongoDB 教程

共17课时 | 1.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号