有时需要将大量数据批量写入数据库,直接使用程序语言和Sql写入往往很耗时间,其中有一种方案就是使用mysql load data infile导入文件的形式导入数据,这样可大大缩短数据导入时间。

LOAD DATA INFILE 语句以很高的速度从一个文本文件中读取行到一个表中。文件名必须是一个文字字符串

1、首先查询,Mysql服务是否正在运行,且local_infile功能是否开启
netstat   -tulpn|grep    mysql
mysql -uroot -p -e "show variables like '%infile%';"

可在配置文件中永久开启或设置变量临时开启或使用mysql程序使用响应选项

2、当读取位于服务器上的文本文件时,文本文件必须处于数据库目录或可被mysql用户读取或可被所有人读取

基本语法:
load   data    [low_priority]   [local]   infile   'file_name txt'      [replace | ignore]   into   table tbl_name
[fields
[terminated by '\t']                 #字段的分隔符(即指定文本文件中列之间的分隔符),默认情况下是一个tab字符(\t)
[OPTIONALLY] enclosed by '']            #字段括起字符,即字段的引用字符
[escaped by'\' ]                  #转义字符,默认的是反斜杠(backslash\)
]

[lines
[terminated by '\n']                  #每条记录的分隔符,默认为'\n'即为换行符
[ignore number lines]
[(col_name, )]
]

1   如果你指定关键词low_priority,那么MySQL将会等到没有其他人读这个表的时候,才把插入数据
     可以使用如下的命令:
     load    data     low_priority   infile  "/home/mark/data.sql"   into table    test.Orders;          #test是库名,Orders是表名

2   如果指定local关键词,则表明从其他客户主机读文件;如果local没指定,文件必须位于mysql服务器上(当从本机读取文件时也可以带上local关键词)

3   replace和ignore关键词控制对现有的唯一键记录的重复的处理

  • ·    如果你指定replace,新行将代替有相同的唯一键值的现有行(文本文件中的记录将会覆盖当前表中的同名记录)。
  • ·    如果你指定ignore,跳过有唯一键的现有行的重复行的输入(文本文件中的记录将会被忽略,不会覆盖当前表中的同名记录)。
  • ·    如果你不指定任何一个选项,当找到重复键时,出现一个错误,并且文本文件的余下部分被忽略

例如:
load  data  low_priority infile "/home/mark/data sql" replace into table test.Orders;

4 分隔符
(1) fields关键字指定了文本文件中字段的分割格式,如果使用这个关键字,MySQL剖析器希望看到至少有下面的一个选项

  • terminated by 字段的分隔符,默认情况下是一个tab字符(\t)
  • enclosed by 字段括起字符,即字段的引用字符
  • escaped by 转义字符,默认的是反斜杠(backslash:\ )

例如:load data infile "/home/mark/Orders txt" replace into table test.Orders fields  terminated by','  enclosed by '"';

(2)lines 关键字指定了每条记录的分隔符,默认为'\n'即为换行符

如果两个字段都指定了那fields必须在lines之前
如果不指定fields关键字,则默认使用:              fields   terminated by'\t'   enclosed by'"'    escaped by'\'
如果不指定一个lines子句,则moren默认使用:  lines   terminated by'\n'

例如:
load data infile "/jiaoben/load.txt" replace into table test.Orders    fields terminated by ','    lines terminated by '/n';

5 load data infile 可以按指定的列把文件导入到数据库中(即只导入文本文件中的某些列而不是全部),当我们要把数据的一部分内容导入的时候,需要加入一些栏目(列/字段/field)到MySQL数据库中,以适应一些额外的需要。
比方说,我们要从Access数据库升级到MySQL数据库的时候

下面的例子显示了如何向表中指定的字段(field)中导入数据:
load   data    infile "/home/Order txt"  into   table   test.Orders(Order_Number, Order_Date, Customer_ID);

6 当在mysql服务器主机上寻找文件时,服务器使用下列规则:
(1)如果给出一个绝对路径名,服务器使用该路径名。
(2)如果给出一个有一个或多个前置部件的相对路径名,服务器相对服务器的数据目录搜索文件。
(3)如果给出一个没有前置部件的一个文件名,服务器在当前数据库的数据库目录寻找文件。
例如: /myfile txt”给出的文件是从服务器的数据目录读取,而作为“myfile txt”给出的一个文件是从当前数据库的数据库目录下读取。

注意:文本文件中字段中的空值用\N表示

mysql中使用load data infile导入数据的用法的更多相关文章

  1. 合理使用mysql中的load data infile导入数据

    基本语法: load data  [low_priority] [local] infile 'file_name txt' [replace | ignore]into table tbl_name ...

  2. 关于MySQL中使用LOAD DATA INFILE导入csv文件时的日期格式问题

    在使用MySQL时,常常会用到Load Data Infile来导入数据,在遇到Date类型的列时,有时会遇到格式转换的问题: 首先创建一张简单的people表,包含名字,生日,年龄三个字段: mys ...

  3. Mysql load data infile 导入数据出现:Data truncated for column

    [1]Mysql load data infile 导入数据出现:Data truncated for column .... 可能原因分析: (1)数据库表对应字段类型长度不够或修改为其他数据类型( ...

  4. 解决ubuntu server mysql load data infile 导入本地文件ERROR 1148 (42000)错误。

    问题:在ubuntu server 上使用apt-get 安装完 mysql 使用 load data infile 出现错误,错误代码如下: ERROR (): The used command i ...

  5. MySQL中的DDL(Data Definition Language,数据定义语言)

    create(创建表) 标准的建表语句: create table [模式名.]表名 ( #可以有多个列定义 columnName1 dataType [default expr(这是默认值)], . ...

  6. arcgis中的load data加载数据

    该工具通过设定字段的对应关系将一个要素类(feature class)的数据加载到另一个要素类里面.通过选择应加载到每个目标字段中的源字段,将匹配源字段中的数据加载到目标数据中. 还可以设置查询,仅加 ...

  7. mysql 的load data infile

    LOAD DATA INFILE语句从一个文本文件中以很高的速度读入一个表中.如果指定LOCAL关键词,从客户主机读文件.如果LOCAL没指定,文件必须位于服务器上.(LOCAL在MySQL3.22. ...

  8. mysql导入数据load data infile用法整理

    有时候我们需要将大量数据批量写入数据库,直接使用程序语言和Sql写入往往很耗时间,其中有一种方案就是使用MySql Load data infile导入文件的形式导入数据,这样可大大缩短数据导入时间. ...

  9. mysql load data infile的使用 和 SELECT into outfile备份数据库数据

    LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name.txt' [REPLACE | IGNORE] INTO TABLE t ...

随机推荐

  1. hdoj1789【贪心】

    题意: 已知有n个作业,每个作业呢,都是一天可以做完,每个作业都有一个截止日期,每个作业如果超过他的截止日期会扣分,最后让你求一个怎么安排求得一个最小扣的分数. 比如现在有3个作业 截止日期:3 3 ...

  2. 洛谷 P2519 [HAOI2011]problem a

    传送门 考虑转化为求最多说真话的人数 设$f(i)$表示排名前$i$的人中最多说真话的人的数量,考虑转移,如果由$j$转移而来,可以设$[j,i]$之间的人全都分数相等,那么式子就是$f[i]=f[j ...

  3. jQuery同时监听两个事件---实现同时操控两个按键

    我们都知道因为js是单线程的,所以没有可以同时触发键盘两个事件的方法 今天我们就来做一个可以实现这个功能方法 先来看一下成品图效果 接下来我们来看下具体是怎么实现的 注释写在了代码里面 <!DO ...

  4. CI框架错误汇总

    2017年1月13日12:09:02 [1] A PHP Error was encounteredSeverity: NoticeMessage: Undefined variable: aticl ...

  5. 题解报告:hdu 6440 Dream(费马小定理+构造)

    解题思路:给定素数p,定义p内封闭的加法和乘法运算(运算封闭的定义:若从某个非空数集中任选两个元素(同一元素可重复选出),选出的这两个元素通过某种(或几种)运算后的得数仍是该数集中的元素,那么,就说该 ...

  6. GDI双缓冲绘图

    一.简介 在进行复杂图形绘制时,若直接在屏幕DC上进行绘制,则会出现明显的闪烁.闪烁产生的原因是当绘制的图形较为 复杂时,图形绘制过程中就被刷新到屏幕上,导致结果断断续续地显示出来.双缓冲绘图的原理是 ...

  7. solr 查询获取数量getCount()

    //前期设置好查询条件和参数 long numFound = 0; SolrQuery query = new SolrQuery("*:*"); query.setQuery(& ...

  8. Suricata产生的数据存储目录

    不多说,直接上干货! 我这里呢,分两种常用的Suricata. 一.源码编译安装的Suricata 这里不多说,大家可以去看我下面写的博客 使用 Suricata 进行入侵监控(一个简单小例子访问百度 ...

  9. js数据类型之判断

    js有几种类型,具体是:字符串(String).数字(Number).布尔(Boolean).数组(Array).对象(Object).空(Null).未定义(Undefined). js提供了typ ...

  10. 浅议block实现原理,block为什么使用copy关键字?

    1.block是一个特殊的oc对象,建立在栈上,而不是堆上,这么做一个是为性能考虑,还有就是方便访问局部变量. 2.默认Block使用到的局部变量会被copy,而不是retain.所以,他无法改变局部 ...