Mysql避免重复插入记录方法
一、mysql replace用法
1.replace into
replace into table (id,name)
values('1','aa'),('2','bb')
此语句的作用是向表table中插入两条记录。如果主键id为1或2不存在
就相当于
insert into table (id,name)
values('1','aa'),('2','bb')
如果存在相同的值则不会插入数据
2.replace(object,search,replace)
把object中出现search的全部替换为replace
select
replace('www.jb51.net','w','Ww')--->WwWwWw.jb51.net
例:把表table中的name字段中的aa替换为bb
update table set
name=replace(name,'aa','bb')
二、try catch异常处理机制
declare continue handler for 1062 set done = 1
注:1062错误是主键字段插入重复的错误。
三 、MySql之INSERT INTO…ON DUPLICATE KEY UPDATE
提供了insert into … on duplicate key
update的语法,该语法在insert的时候,如果insert的数据会引起唯一索引(包括主键索引)的冲突,即这个唯一值重复了,则不会执行insert操作,而执行后面的update操作。
注意:ON
DUPLICATE KEY UPDATE只是MySQL的特有语法,并不是SQL标准语法!
例如,现在有表test,test表中有字段a,在a上有主键或者唯一索引,并且表中只有一条a=1, b=1的数据,现在执行如下的sql:
insert into test (a,b) values (1,2) on duplicate key update b = b + 1;
注:直接update = ,不能用完整的update语句。
因为a=1的记录已存在了,所以不会执行insert,而会在该条记录上执行update语言`b=b+1`,记录会变成a=1,b=2
insert into test (a,b) values (2,2) on duplicate key update b = b + 1;
因为a=2的记录不存在,所以执行insert
如果行作为新记录被插入,则受影响的行为1;如果原有记录被更新,则受影响行为2;如果原有记录已存在,但是更新的值和原有值相同,则受影响行为0。
多唯一索引冲突的情况说明:
为了测试方便,我们建了下面的数据表:
create table test(
a int not null primary key,
b int not null UNIQUE key,
c int not null
)
输入数据:insert into test values(1,1,1), (2,2,2);
然后执行:insert into test values(1,2,3) on duplicate key update c = c + 1;
因为a和b都是唯一索引,插入的数据在两条记录上产生了冲突,然而执行后只有第一条记录被修改:
mysql> select * from test;
+---+---+---+
| a | b | c |
+---+---+---+
| 1 | 1 | 2 |
| 2 | 2 | 2 |
+---+---+---+
2 rows in set (0.00 sec)
上面的语句等同于:update test set c=c+1 where a=1 or b = 2 limit 1;
如果a=1
or b =2匹配多条记录,只有第一条记录被更新。所以,一般情况下,我们应该避免在有多个唯一索引的表中使用on duplicate key update。
使用values()方法,在update中可以使用values()方法引用在insert中的值,如:
insert into test values(1,3,5) on duplicate key update c = values( c )+ 1;
该语句会使a=1的记录中c字段的值更新为6,因为values(c)的值是引用的insert部分的值,在这个例子中就是insert into test values(1,3,5) 中的5,所以最终更新的值为6。
注意:VALUES()函数只在INSERT...UPDATE语句中有意义,其它时候会返回NULL。
last_insert_id()
如果表含有auto_increment字段,使用insert … on duplicate key update插入或更新后,last_insert_id()返回auto_increment字段的值。
并发控制
在使用例如MyISAM这样的表级锁的分区表上使用insert … on duplicate key update时,会锁住所有分区表,而在例如使用InnoDB这样的行级锁的分区表上则不会锁住所有分区表。
delayed选项
delayed选项会被忽略,当我们使用on duplicate key update时。
四:使用ignore关键字
如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用:
INSERT IGNORE
INTO `table_name` (`email`, `phone`, `user_id`) VALUES ('test9@163.com',
'99999', '9999');
这样当有重复记录就会忽略,执行后返回数字0
还有个应用就是复制表,避免重复记录:
INSERT IGNORE INTO `table_1`
(`name`) SELECT `name` FROM `table_2`;
最后贴上一个练习时的sp作为参考之用。
CREATE PROCEDURE Jack_xml_replace(xmlstr LONGTEXT,company_code int)
BEGIN
declare parentpoint_count int default 0; #声明父节点个数
declare i int default 1; #循环次数,循环结束判定
declare v_bankCd varchar(20);
declare v_outletNo varchar(20);
declare v_payAmount NUMERIC(10,1);
declare v_paymentDate varchar(20);
declare v_paymentNum varchar(20);
declare v_paymentType varchar(1);
declare v_paymentUsage varchar(20);
declare v_sourcecode varchar(20);
declare v_transactionId varchar(255); set parentpoint_count = ExtractValue(xmlstr,'count(/o/payList/e)'); #获取行数 #开始循环
while i <= parentpoint_count do
set v_bankCd = ExtractValue(xmlstr,'/o/payList/e[$i]/bankCd');
set v_outletNo = ExtractValue(xmlstr,'/o/payList/e[$i]/outletNo');
set v_payAmount = ExtractValue(xmlstr,'/o/payList/e[$i]/payAmount');
set v_paymentDate = ExtractValue(xmlstr,'/o/payList/e[$i]/paymentDate');
set v_paymentNum = ExtractValue(xmlstr,'/o/payList/e[$i]/paymentNum');
set v_paymentType = ExtractValue(xmlstr,'/o/payList/e[$i]/paymentType');
set v_paymentUsage = ExtractValue(xmlstr,'/o/payList/e[$i]/paymentUsage');
set v_sourcecode = ExtractValue(xmlstr,'/o/payList/e[$i]/sourcecode');
set v_transactionId = ExtractValue(xmlstr,'/o/payList/e[$i]/transactionId'); update jack_xml a set a.bankCd = v_bankCd,outletNo = v_outletNo ,payAmount = v_payAmount ,paymentDate = v_paymentDate ,paymentNum = v_paymentNum ,paymentType = v_paymentType ,paymentUsage = v_paymentUsage ,sourcecode = v_sourcecode
where a.company_code=company_code and a.transactionId=v_transactionId; replace into jack_xml(company_code,bankCd,outletNo,payAmount,paymentDate,paymentNum,paymentType,paymentUsage,sourcecode,transactionId)
value(company_code,v_bankCd,v_outletNo,v_payAmount,v_paymentDate,v_paymentNum,v_paymentType,v_paymentUsage,v_sourcecode,v_transactionId); set i=i+1;
end while;
select * from jack_xml; #查看实体表数据
END
# 运行参数
CALL Jack_xml_replace('
<?xml version="1.0" encoding="utf-8"?>
<o>
<payList class="array">
<e class="object">
<bankCd type="string">4</bankCd>
<outletNo type="string">0510020017</outletNo>
<payAmount type="number">200.0</payAmount>
<paymentDate type="string">20161212121212</paymentDate>
<paymentNum type="string">12323</paymentNum>
<paymentType type="string">Y</paymentType>
<paymentUsage type="string">B</paymentUsage>
<sourcecode type="string">CS</sourcecode>
<transactionId type="string">99B2E125-AB09-4AE3-9A05-5FE9876AF799</transactionId>
</e>
<e class="object">
<bankCd type="string">4</bankCd>
<outletNo type="string">0510020017</outletNo>
<payAmount type="number">300.0</payAmount>
<paymentDate type="string">20161112131415</paymentDate>
<paymentNum type="string">23232</paymentNum>
<paymentType type="string">Y</paymentType>
<paymentUsage type="string">B</paymentUsage>
<sourcecode type="string">SFA</sourcecode>
<transactionId type="string">99B2E125-AB09-4AE3-9A05-5FE9876AF798</transactionId>
</e>
</payList>
</o>',3006);
Mysql避免重复插入记录方法的更多相关文章
- mysql防止重复插入记录方法总结
mysql防止重复插入记录方法总结 防止mysql重复插入记录的方法有很多种,常用的是ignore,Replace,ON DUPLICATE KEY UPDATE,当然我们也可以在php中加以判断了. ...
- MySql避免重复插入记录方法(ignore,Replace,ON DUPLICATE KEY UPDATE)
ON DUPLICATE KEY UPDATE 博客 http://blog.csdn.net/jbboy/article/details/46828917
- MySql避免重复插入记录的几种方法
本文章来给大家提供三种在mysql中避免重复插入记录方法,主要是讲到了ignore,Replace,ON DUPLICATE KEY UPDATE三种方法,有需要的朋友可以参考一下 方案一:使用ign ...
- mysql性能优化总结(MySql避免重复插入记录的几种方法)
如果我们创建了(area, age,salary)的复合索引,那么其实相当于创建了:(area,age,salary),(area,age).(area)三个索引,这被称为最佳左前缀特性.因此我们在创 ...
- MYSQL避免重复插入记录的三种方法
方案一:使用ignore关键字 如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用: insert ignore into table_name(ema ...
- 分享一:关于mysql中避免重复插入记录方法
一: INSERT ON DUPLICATE KEY UPDATE 如果您指定了ON DUPLICATE KEY UPDATE,并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重 ...
- MySql避免重复插入记录
今天用python抓取数据入库需要避免重复数据插入,在网上找了一些方法: 方案一:使用ignore关键字 如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用 ...
- MySQL防止重复插入记录SQL
INSERT INTO sysuser(') DUAL:表示虚拟表 sysuser:表名称
- MySQL防止重复插入唯一限制的数据 4种方法
MySQL防止重复插入唯一限制的数据,下面我们逐一分析 : 1.insert ignore into 当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回.所以使用ignore请确保 ...
随机推荐
- java求10!的阶乘
package com.aaa; //求10!的阶乘 public class Cheng { public static void main(String[] args) { int s=1; fo ...
- CCPC2018-湖南全国邀请赛 K 2018
K.2018 题目描述 Given a, b, c, d , find out the number of pairs of integers ( x, y ) where a ≤ x ≤ b, c ...
- 阿里Java开发规范记录(一)
近日,从网上下载了阿里云栖社区发布的<阿里巴巴Java开发手册(正式版)>v1.1.0版.从编程以来,一直苦于没有相关的.全面的.靠谱的规范可以参考,有了这手册,日后编程也算是找到了依 ...
- 引用WebService出现错误
在引用WebService作为服务引用的时候,由于VS生成时生成了两个入口点,导致出现 引发的异常:“System.Windows.Markup.XamlParseException”(位于 Pres ...
- pandas层级索引
层级索引(hierarchical indexing) 下面创建一个Series, 在输入索引Index时,输入了由两个子list组成的list,第一个子list是外层索引,第二个list是内层索引. ...
- android 侧滑菜单
就是用手一滑才出现,占手机半个多屏幕的菜单.为了美观和页面转跳,很多时候要用到. 实现的话就是使用官方的DrawerLayout,注意这个布局一定要是最顶层的布局. 在DrawerLayout里面直接 ...
- .Net Core 迁移之坑一 《WebAPI Get请求参数传入输入带有[]不识别问题》
在Framwork 体系下 WebAPI项目 会有很多默认特性,例如:Get查询竟然支持三种数组查询方式 1.https://localhost:44390/api/values?status=1&a ...
- c# 类型化变量的var,和javascript一样的使用
.net framework推出var关键字,注意是关键字,不是什么新类型,只是编译器抛给我们的“语法糖” 1.object是所有类型的父类型,object a=1;和var a=1:的区别在于前一个 ...
- 【294】◀▶ Python 字符串说明
目录: 一.Python访问字符串中的值 二. Python 转义字符 三.Python 字符串运算符 参考:Python 字符串 一.Python访问字符串中的值 Python不支持单字符类型, ...
- python中shuffleSplit()函数
参数: n : int 数据集中的元素总数. n_iter : int (default 10) 重新洗牌和分裂迭代次数. test_size : float (default 0.1), int, ...