近日遇到个卡库的问题,环境是MySQL5.5.12,报错信息如下

[ERROR] Slave SQL: Query partially completed on the master (error on master: 1317) and was aborted. There is a chan
ce that your master is inconsistent at this point. If you are sure that your master is ok, run this query manually on the slave and
then restart the slave with SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1; START SLAVE; . Query: 'update nls_quotes_delay_tmp A set t_volume
=(select B.t_volume from nls_quotes_delay B where A.symbol=B.symbol and A.symbol='sina')', Error_code: 1317

从报错信息上可以很直观的了解到,在主库上这个SQL部分被执行,并中断了。如果目前主库的数据是正确的,mysql建议在从库上skip这条SQL。

处理这个卡库比较简单,只要对比一下主库和从库的数据,然后稍作判断即可,我们也很快就skip过这个sql既恢复了服务。


但是处理完这个故障之后,忽然打算对update进行一下扩展的学习。

在这个场景下,开发的意图是用B的一个结果集更新A表的结果集,条件为A的一个字段等于B的一个字段。

但是明显,上面报错的SQL并不能实现这个需求,它会将A表的被更新字段全都刷成一个values,根本达不达业务的需求。那么这个SQL应该如何正确书写呢?

我们以2个表为例,aaa和bbb,表结构如下:

aaa表:
+------+------+
| x | y |
+------+------+
| 1 | 1 |
| 2 | 2 |
| 3 | 3 |
+------+------+ bbb表:
+------+------+
| x | y |
+------+------+
| 1 | 3 |
| 2 | 4 |
| 3 | 5 |
+------+------+

目前的需求就是将bbb表的y字段的值按照aaa.x=bbb.x的条件赋值给aaa的y字段。

首先,如果是打算每次更新一行,那么sql应该写成如下,然后使用脚本等外部手段循环所有的x值。(比如for i in循环等脚本)

update aaa set y=(select y from bbb where bbb.x=2) where x=2;

然后,如果不打算使用外部脚本直接在mysql中实现呢? 那么可以按照如下写法:

update aaa set y=(select y from bbb where aaa.x=bbb.x) where x in (select x from bbb);

因为x in (select x from bbb)被等效修改为 select x from aaa where exists (select 1 from bbb where aaa.x = bbb.x)

> explain extended select * from aaa,bbb where aaa.x in (select x from bbb);
+----+--------------------+-------+------+---------------+------+---------+------+------+----------+-------------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
+----+--------------------+-------+------+---------------+------+---------+------+------+----------+-------------------+
| 1 | PRIMARY | aaa | ALL | NULL | NULL | NULL | NULL | 4 | 100.00 | Using where |
| 1 | PRIMARY | bbb | ALL | NULL | NULL | NULL | NULL | 4 | 100.00 | Using join buffer |
| 2 | DEPENDENT SUBQUERY | bbb | ALL | NULL | NULL | NULL | NULL | 4 | 100.00 | Using where |
+----+--------------------+-------+------+---------------+------+---------+------+------+----------+-------------------+
3 rows in set, 1 warning (0.00 sec) > show warnings;
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Level | Code | Message |
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Note | 1003 | select `test`.`aaa`.`x` AS `x`,`test`.`aaa`.`y` AS `y`,`test`.`bbb`.`x` AS `x`,`test`.`bbb`.`y` AS `y` from `test`.`aaa` join `test`.`bbb` where <in_optimizer>(`test`.`aaa`.`x`,<exists>(select 1 from `test`.`bbb` where (<cache>(`test`.`aaa`.`x`) = `test`.`bbb`.`x`))) |
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)

ps:这要感谢explain extended,可以使用show warnings查看sql被改写成什么。

具体可以参看:http://www.mysqlperformanceblog.com/2006/07/24/extended-explain/

最后,我们发现如果这么写也能实现我们的目的。

update aaa set y=(select y from bbb where aaa.x=bbb.x);

但是这是有前提的,第一bbb表的x字段需要唯一,并且比aaa表的x字段的values多,否则就会变成如下这种情况。有一列会被更新成null。

 > select * from aaa;
+------+------+
| x | y |
+------+------+
| 1 | 1 |
| 2 | 2 |
| 3 | 3 |
| 4 | 4 |
+------+------+
4 rows in set (0.00 sec) > select * from bbb;
+------+------+
| x | y |
+------+------+
| 1 | 5 |
| 2 | 6 |
| 3 | 7 |
+------+------+
3 rows in set (0.00 sec) m7798:10.73.11.210 > update aaa set y=(select y from bbb where aaa.x=bbb.x);
Query OK, 4 rows affected (0.01 sec)
Rows matched: 4 Changed: 4 Warnings: 0 > select * from aaa;
+------+------+
| x | y |
+------+------+
| 1 | 5 |
| 2 | 6 |
| 3 | 7 |
| 4 | NULL |
+------+------+
4 rows in set (0.01 sec)

从结果看,应该是先进行了left join然后将aaa表的y列更新了,但是具体内部逻辑,没有找到相关官方文档支持,比较可惜,继续去找原因。

MySQL遇到的一个卡库问题及对update的学习的更多相关文章

  1. java web(一) 使用sql标签库+tomcat+mysql手动创建一个jsp练习总结

    2016-09-0111:06:53                                     使用sql标签库+tomcat+mysql手动创建一个jsp 1. 1.1安装tomcat ...

  2. golang github.com/go-sql-driver/mysql 遇到的数据库,设置库设计不合理的解决方法

    golang github.com/go-sql-driver/mysql 遇到的数据库,设置库设计不合理的解决方法,查询中报了以下这个错 Scan error on column index 2: ...

  3. mysql 语句的使用清库数据转移

    mysql清空数据库表 方法1:重建库和表用mysqldump --no-data把建表SQL导出来,然后drop database再create database,执行一下导出的SQL文件: 方法2 ...

  4. mysql下批量清空某个库下的所有表(库不要删除,保留空库)

    总所周知,mysql下要想删除某个库下的某张表,只需要切换到该库下,执行语句"drop table tablename"即可删除!但若是该库下有成百上千张表,要是再这样一次次执行d ...

  5. mysql中把一个表的数据批量导入另一个表中

    mysql中把一个表的数据批量导入另一个表中   不管是在网站开发还是在应用程序开发中,我们经常会碰到需要将MySQL或MS SQLServer某个表的数据批量导入到另一个表的情况,甚至有时还需要指定 ...

  6. mysql中查询一个字段属于哪一个数据库中的哪一个表的方式

    mysql中查询一个字段具体是属于哪一个数据库的那一张表:用这条语句就能查询出来,其中 table_schema 是所在库, table_name 是所在表 --mysql中查询某一个字段名属于哪一个 ...

  7. 如何给mysql数据库添加一个用户

    首先以root身份登录到MySQL服务器中. $ mysql -u root -p 当验证提示出现的时候,输入MySQL的root帐号的密码. 创建一个MySQL用户 使用如下命令创建一个用户名和密码 ...

  8. Spring Boot+Jpa(MYSQL)做一个登陆注册系统(前后端数据库一站式编程)

    Spring Boot最好的学习方法就是实战训练,今天我们用很短的时间启动我们第一个Spring Boot应用,并且连接我们的MySQL数据库. 我将假设读者为几乎零基础,在实战讲解中会渗透Sprin ...

  9. MySQL如何搭建主库从库(Docker)

    目录 MySQL主从搭建 一.主从配置原理 二.操作步骤 1.创建主库和从库容器 2.启动主从库容器 3.远程连接并操作主从库 4.测试主从同步 MySQL主从搭建 一.主从配置原理 mysql主从配 ...

随机推荐

  1. OTA之流式更新及shell实现

    在OTA升级时,需要从网络下载OTA包,并写到flash上的对应分区中. 最简单的方式是将下载与更新分离,先将完整的数据包下载到本地,再将本地的OTA包更新到flash上.方便可靠. 但这种方式的问题 ...

  2. linux设置时区同步时间

    linux设置时区同步时间 一.运行tzselect sudo tzselect 在这里我们选择亚洲 Asia,确认之后选择中国(China),最后选择北京(Beijing) 如图:   二.复制文件 ...

  3. Tutorial 4: Authentication & Permissions

    转载自:http://www.django-rest-framework.org/tutorial/4-authentication-and-permissions/ Tutorial 4: Auth ...

  4. YAML中使用Jinja模板以{{ foo }}开头需要整行加双引号

    YAML陷阱 YAML语法要求如果值以{{ foo }}开头的话我们需要将整行用双引号包起来.这是为了确认你不是想声明一个YAML字典.该知识点在 YAML 语法 页面有所讲述. 这样是不行的: - ...

  5. SLD 官方实例

    基于xml标准的sld格式: <?xml version="1.0" encoding="UTF-8"?> <StyledLayerDescr ...

  6. Percona XtraDB Cluster(PXC) Mysql 集群

    Percona XtraDB Cluster(PXC)   ---原理介绍篇         目录 一.简介 1 二.优缺点 2 三.区别/局限性 3 四. PXC复制原理 4 五. 服务解释 5   ...

  7. spring源码解析--事务篇(前篇)

    对于每一个JAVA程序员,spring应该是再熟悉不过的框架了,它的功能有多强大我就不多说了,既然他有这么强大的功能,是如何实现的呢?这个就需要从他的原理去了解,而最直接了解原理的方式莫过于源码.当然 ...

  8. 线性SVM的推导

    线性SVM算法的一般过程 线性SVM的推导 超平面方程 SVM是用来分类的.给定一系列输入数据(n维向量),需要找到一个切分界线(n-1维的超平面),这里假定数据是线性可分的.比如,二维数据的超平面是 ...

  9. Android学习笔记(三) UI布局

    每一个布局都有其适合的方式,另外,这几个布局元素可以相互嵌套应用,做出美观的界面. 一.线性布局(LinearLayout) 线性布局,这个东西,从外框上可以理解为一个div,他首先是一个一个从上往下 ...

  10. java-list-分组

    Map<String, List<Hb12Domain>> groupBy = hb18DomainList.stream().collect(Collectors.group ...