高并发访问mysql时的问题(一):库存超减
如果在对某行记录的更新时不采取任何防范措施,在多线程访问时,就容易出现库存为负数的错误.
以下用php、mysql,apache ab工具举例说明:
mysql表结构
CREATE TABLE `yxt_test_concurrence` ( `id` ) NOT NULL AUTO_INCREMENT, `value` ) NOT NULL COMMENT '库存', PRIMARY KEY (`id`) ) ENGINE DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci COMMENT='库存表';
CREATE TABLE `yxt_test_pv` ( `id` ) unsigned NOT NULL AUTO_INCREMENT, `val` ) DEFAULT NULL COMMENT '该线程读取到的库存数量', PRIMARY KEY (`id`) ) ENGINE DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci COMMENT='访问记录表,每次访问都增加一条记录,并记录此次访问时的库存数';
在库存表中存入模拟库存500个.
在此,为方便,php采用TP框架:
public function tc(){ $this->tc = M("test_concurrence");//模拟商品的剩余数量 $this->pv = M("test_pv");//模拟访问次数 $res=$this->tc->field('value')->find(1);//查到的剩余数量 $value=$res['value']; if($value>0){//如果大于0,则进行下面的逻辑 $this->pv->data(array('val'=>$value))->add();//这个是用来记录访问的次数,并记录此次访问时的库存数
M()->execute("UPDATE `yxt_test_concurrence` SET `value`=`value` - 1 WHERE `id` = 1"); //商品数量减1
}
}
使用ab工具模拟并发访问:
C:\Users\chenhui>ab -c 50 -n 500 http://study.com/course/Course/tc/ This is ApacheBench, Version 2.3 <$Revision: 1554214 $> Copyright 1996 Adam Twiss, Zeus Technology Ltd, http://www.zeustech.net/ Licensed to The Apache Software Foundation, http://www.apache.org/ Benchmarking studyyxtcmf.com (be patient) Completed 100 requests Completed 200 requests Completed 300 requests Completed 400 requests Completed 500 requests Finished 500 requests Server Software: Apache/2.4.9 Server Hostname: studyyxtcmf.com Server Port: 80 Document Path: /course/Course/tc/ Document Length: 25786 bytes Concurrency Level: 50 Time taken for tests: 60.035 seconds Complete requests: 500 Failed requests: 450 (Connect: 0, Receive: 0, Length: 450, Exceptions: 0) Total transferred: 12973630 bytes HTML transferred: 12785130 bytes Requests per second: 8.33 [#/sec] (mean) Time per request: 6003.543 [ms] (mean) Time per request: 120.071 [ms] (mean, across all concurrent requests) Transfer rate: 211.03 [Kbytes/sec] received Connection Times (ms) min mean[+/-sd] median max Connect: 0 1 2.1 1 34 Processing: 781 5915 1578.6 5996 12272 Waiting: 765 5901 1581.8 5983 12261 Total: 783 5916 1578.4 5997 12272 Percentage of the requests served within a certain time (ms) 50% 5997 66% 6385 75% 6707 80% 6850 90% 7387 95% 8402 98% 9734 99% 10300 100% 12272 (longest request)
查看数据库记录:
SELECT * from yxt_test_pv; --截取一段记录(左边是第几次访问,右侧是当次访问看到的库存) | | | | | | | | | | | | |
可以发现在341-343次读取的库存数量是一样的,在库存还很多的情况时,并不会出现问题:因为程序中减库存的逻辑,是当前库存量减去1.但是库存不多的时候,就很可能出现问题,比如库存只有一个了,而此时有多个线程查询到此时还有一个库存,因为1>0满足条件,所以库存减1,多个线程都对当前库存减1,最后就多减了库存,出现负数,这是不允许的.
所以一定要采取措施.
我认为,总的原则是:对于某一个时刻的库存,只允许一个会话去修改.要满足此条件.有两种选择:
1.对于某一个时刻的库存,只允许一个会话去读取(锁机制).待锁被释放后,其他会话才可以读取库存.
2.对于某一个时刻的库存,设定版本(即增加一个版本字段,用于比较.我对版本的理解是刻个记号),更新库存时要判断版本是否发生变化,若没发生变化,则更新库存的同时,更新版本号.若更新库存时发现版本发生变化了,那一定是有别的线程早已对库存修改,此情况下就放弃修改.
选择1.使用mysql的锁机制.(悲观锁)
public function tc(){ $this->tc = M("test_concurrence");//模拟商品的剩余数量 $this->pv = M("test_pv");//模拟访问次数 //对表加锁,注意,如果加锁过程中要操作多个表,要对这几个表都加锁,否则会报错
//mysql> lock table yxt_test_concurrence read;--只锁了一张表
//Query OK, 0 rows affected (0.00 sec)
//mysql> SELECT * from yxt_test_pv;--读取没有被锁的表
//ERROR 1100 (HY000): Table 'yxt_test_pv' was not locked with LOCK TABLES--报错,提示查询的表没有被锁住
M()->execute("lock tables yxt_test_concurrence write,yxt_test_pv write;"); $res=$this->tc->field('value')->find(1);//查到的剩余数量 $value=$res['value']; if($value>0){//如果大于0,则进行下面的逻辑 $this->pv->data(array('val'=>$value))->add();//这个是用来记录访问的次数 M()->execute( "UPDATE `yxt_test_concurrence` SET `value`=`value` - 1 WHERE `id` = 1"); //商品数量减1 } //解锁 M()->execute("unlock tables"); }
采用锁机制,可以严格控制库存数量的变化,但是采用锁会增加数据库的开销.
选择2.版本控制(乐观锁)
乐观锁,是假定事务之间是互不干扰的,事务在访问数据的时候,并不会获取锁,但是,在提交前,每个事务都要确保其他事务并没有修改他读取到的数据.如果在更新数据时发现其他事务已经修改了数据,则回滚提交.乐观锁经常用于"低争用数据结构"的场景中.当冲突特别少的时候,事务可以在完成时,不需要管理锁的开销及等待其他事务释放锁,这可以带来更高的吞吐率.但是,如果对于数据的争用特别频繁,重新开启一个新事务的开销会明显影响性能.
通常认为,其他并发控制方法,在此情况下会有更好的表现,然而,基于悲观锁的方法,会导致较差的性能.因为即使死锁可以避免,"锁"仍会极大的影响并发性能.(我想应该是因为会话被阻塞,从而导致只能串行访问数据库)
以上定义摘自wiki:https://en.wikipedia.org/wiki/Optimistic_concurrency_control
这种情况下,如果并发访问,则修改失败的几率会较高,
举例:在热销产品场景下则容易出现购买失败的情况.这对用户的体验是不好的.因为这意味着又要重新尝试一次.
小结:应该采取哪一种锁,应根据实际场景来权衡利弊,如果更新的很频繁,那应该使用悲观锁.此刻需要考虑的问题是:如何解决并发问题.如果很少更新,则使用乐观锁更为方便省事.
高并发访问mysql时的问题(一):库存超减的更多相关文章
- [转]高并发访问下避免对象缓存失效引发Dogpile效应
避免Redis/Memcached缓存失效引发Dogpile效应 Redis/Memcached高并发访问下的缓存失效时可能产生Dogpile效应(Cache Stampede效应). 推荐阅读:高并 ...
- mysql悲观锁处理赠品库存超卖的情况
处理库存超卖的情况前,先了解下什么是乐观锁和悲观锁,下面的几篇博客已经介绍的比较详细了,我就不在赘述其原理了 [MySQL]悲观锁&乐观锁 对mysql乐观锁.悲观锁.共享锁.排它锁.行锁.表 ...
- ql Server 高频,高并发访问中的键查找死锁解析
死锁对于DBA或是数据库开发人员而言并不陌生,它的引发多种多样,一般而言,数据库应用的开发者在设计时都会有一定的考量进而尽量避免死锁的产生.但有时因为一些特殊应用场景如高频查询,高并发查询下由于数据库 ...
- Sql Server 高频,高并发访问中的键查找死锁解析
死锁对于DBA或是数据库开发人员而言并不陌生,它的引发多种多样,一般而言,数据库应用的开发者在设计时都会有一定的考量进而尽量避免死锁的产生.但有时因为一些特殊应用场景如高频查询,高并发查询下由于数据库 ...
- memcached缓存失效时的高并发访问问题解决
memcached一般用于在访问一些性能相对低下的数据接口时(如数据库),为了保证这些数据接口的稳定性,加上memcached以减少访问次数,保证这些数据接口的健壮性.一般memcached的数据都是 ...
- OpenResty + Lua访问Redis,实现高并发访问时的毫秒级响应打回
一.lua中redis的配置依赖: 1.OpenResty的lua访问redis的插件:https://github.com/openresty/lua-resty-redis 二.下载后,导入对应的 ...
- Java集群--大型网站是怎样解决多用户高并发访问的
时间过得真快,再次登录博客园来写博,才发现距离上次的写博时间已经过去了一个月了,虽然是因为自己找了实习,但这也说明自己对时间的掌控能力还是没那么的强,哈哈,看来还需不断的努力啊!(这里得特别说明一下本 ...
- 大数据量高并发访问SQL优化方法
保证在实现功能的基础上,尽量减少对数据库的访问次数:通过搜索参数,尽量减少对表的访问行数,最小化结果集,从而减轻网络负担:能够分开的操作尽量分开处理,提高每次的响应速度:在数据窗口使用SQL时,尽量把 ...
- jemter模拟高并发访问(亲测ok)
https://blog.csdn.net/a574258039/article/details/19549407
随机推荐
- Hadoop 2.6.4单节点集群配置
1.安装配置步骤 # wget http://download.oracle.com/otn-pub/java/jdk/8u91-b14/jdk-8u91-linux-x64.rpm # rpm -i ...
- 【dom4j】解析xml为map
dom4j解析xml文件 <?xml version="1.0" encoding="utf-8"?> <workflows> < ...
- ADF_Starting系列7_使用EJB/JPA/JSF通过ADF构建Web应用程序之创建UI View
2013-05-01 Created By BaoXinjian
- eclipse中没有R文件
换了台电脑,把eclipse安装上去,很久没用,最近用了一下.发现R文件无法生成.试了各种方法. Project-->Clean:从其他的项目中,复制一个R.java过来:检查语法:勾选上了Pr ...
- load、init和initialize的区别
在NSObject.h中找到三个方法 + (void)load; + (void)initialize; - (instancetype)init 1. 可知三个方法类型,两个类方法,一个对象方法 2 ...
- 查看并更改mysql编码
show variables like 'character%'; set character_set_client=utf8 ; set character_set_connection=utf8 ...
- js创建节点,小试牛刀
实现如下的功能 非常简单的一个小训练. 思想: 1.首先创建text和一个button 代码如下. <body> <input type="text" id=&q ...
- LinQ To Object 基本用法
http://www.cnblogs.com/terryzh/archive/2012/11/10/2763538.html LinQ To Object 基本用法 inq的基本语法:var resu ...
- 如何实现Qlikview的增量数据加载
笔者备注: 刚刚接错Qlikview,上网搜集的资料,如何处理增量数据. 1 寻找增量时间戳(1)各种数据库:表的创建时间字段和修改时间字段或者最后的修改时间字段:(2)sql server:可以用找 ...
- MySQL 常用命令(持续更新)
停止启动MySQL服务 停止:net stop mysql启动:net start mysql 查看正在运行的线程 SHOW PROCESSLIST SHOW FULL PROCESSLIST 杀死线 ...