dubbo服务+Spring事务+AOP动态数据源切换 出错
1:问题描述,以及分析
项目用了spring数据源动态切换,服务用的是dubbo。在运行一段时间后程序异常,更新操作没有切换到主库上。
这个问题在先调用读操作后再调用写操作会出现。
经日志分析原因:
第一:当程序运行一段时间后调用duboo服务时..([DubboServerHandler-192.168.1.106:20880-thread-199] [DubboServerHandler-192.168.1.106:20880-thread-200]) dubbo服务默认最大200线程(超过200个线程以后服务不会创建新的线程了),读操作与写操作有可能会在一个线程里(读操作的事务propagation是supports,写是required),当这种情况出现时MethodBeforeAdvice.before先执行,DataSourceSwitcher.setSlave()被调用,然后DynamicDataSource.determineCurrentLookupKey(此方法调用contextHolder.get获取数据源的key)被调用,此时数据源指向从库也就是只读库。当读操作执行完成后,dubbo在同一个线程(thead-200)里执行更新的操作(比如以update,insert开头的服务方法),这时会先执行DynamicDataSource.determineCurrentLookupKey,指向的是读库,然后执行MethodBeforeAdvice.before,DataSourceSwitcher.setMaster()被调用,注意,这时DynamicDataSource.determineCurrentLookupKey不会被再次调用,所以这时数据源仍然指向读库,异常发生了。(写从库了)
DynamicDataSource.determineCurrentLookupKey 与DataSourceSwitcher.setXXX()方法的执行顺序是导致问题的关键,这个跟事务的advice与动态设置数据源的advice执行顺序有关.
2:application.xml配置
<bean id="parentDataSource" class="org.apache.commons.dbcp2.BasicDataSource"> <property name="driverClassName" value="com.mysql.jdbc.Driver"/> <property name="initialSize" value="20"/> <property name="maxTotal" value="50"/> <property name="maxIdle" value="10"/> <property name="testOnBorrow" value="true"/> <property name="testWhileIdle" value="true"/> <property name="testOnReturn" value="true"/> <property name="defaultAutoCommit" value="false"/></bean><!-- 主数据源--><bean id="masterDataSource" parent="parentDataSource"> <property name="url" value="jdbc:mysql://192.168.60.45:13306/ac_vote?autoReconnect=true&useSSL=false"/> <property name="username" value="data"/> <property name="password" value="acfundata"/></bean><!-- 从数据源--><bean id="slaveDataSource" parent="parentDataSource"> <property name="url" value="jdbc:mysql://192.168.60.45:23306/ac_vote?autoReconnect=true&useSSL=false"/> <property name="username" value="data"/> <property name="password" value="acfundata"/></bean><!-- 配置自定义动态数据源--><bean id="dataSource" class="tv.acfun.service.common.database.DynamicDataSource"> <property name="targetDataSources"> <map key-type="java.lang.String"> <entry key="slave" value-ref="slaveDataSource" /> <entry key="master" value-ref="masterDataSource" /> </map> </property> <property name="defaultTargetDataSource" ref="masterDataSource" /></bean> <!--开启自动代理功能 true使用CGLIB --><aop:aspectj-autoproxy proxy-target-class="true"/><!-- 声明AOP 切换数据源通知 类中加@Component 自动扫描xml中不用配<bean>了<bean id="dataSourceAdvice" class="tv.acfun.service.vote.aop.DataSourceAdvice" /> -->
<!-- 配置通知和切点 注意这个一定要配置在事务声明(txAdvice)之前 否则就会出现数据源切换出错 -->
<aop:config>
<aop:advisorpointcut="execution(* tv.acfun.service.vote.manager.impl.*ManagerImpl.*(..))"advice-ref="dataSourceAdvice" /></aop:config> <!-- 配置事务管理器--><bean id="transactionManager" class="org.springframework.jdbc.datasource.DataSourceTransactionManager"> <property name="dataSource" ref="dataSource" /></bean><!--配置事务的传播特性 --><tx:advice id="txAdvice" transaction-manager="transactionManager"> <tx:attributes><!-- 对增、删、改方法进行事务支持 --><tx:method name="add*" propagation="REQUIRED" /> <tx:method name="create*" propagation="REQUIRED" /> <tx:method name="save*" propagation="REQUIRED"/> <tx:method name="edit*" propagation="REQUIRED" /> <tx:method name="update*" propagation="REQUIRED" /> <tx:method name="delete*" propagation="REQUIRED" /> <tx:method name="remove*" propagation="REQUIRED" /><!-- 对查找方法进行只读事务 --><tx:method name="find*" propagation="REQUIRED" read-only="true" /> <tx:method name="query*" propagation="SUPPORTS" read-only="true" /> <tx:method name="get*" propagation="SUPPORTS" read-only="true" /><!-- 对其它方法进行只读事务 --> <!--<tx:method name="*" propagation="SUPPORTS" read-only="true" />--></tx:attributes></tx:advice>
<!--开启注解式事务扫描 要开启事务的service实现类中 加上@Transactional注解--><tx:annotation-driven/><!--未开启事务扫描时 需指定aop配置 声明那些类的哪些方法参与事务<aop:config> <aop:advisor pointcut="execution(* tv.acfun.service.vote.manager..*Service.*(..))" advice-ref="txAdvice" /> <aop:advisor pointcut="execution(* tv.acfun.service.vote.manager..*ServiceImpl.*(..))" advice-ref="txAdvice" /></aop:config>-->
3. DataSourceAdvice类
@Slf4j@Aspect@Componentpublic class DataSourceAdvice implements MethodBeforeAdvice, AfterReturningAdvice, ThrowsAdvice {
// service方法执行之前被调用public void before(Method method, Object[] args, Object target) throws Throwable { log.info("切入点: " + target.getClass().getName() + "类中" + method.getName() + "方法"); if (method.getName().startsWith("insert") || method.getName().startsWith("create") || method.getName().startsWith("save") || method.getName().startsWith("edit") || method.getName().startsWith("update") || method.getName().startsWith("delete") || method.getName().startsWith("remove")) { log.info("切换到: master");DataSourceSwitcher.setMaster();} else { log.info("切换到: slave");DataSourceSwitcher.setSlave();}}
// service方法执行完之后被调用public void afterReturning(Object var1, Method var2, Object[] var3, Object var4) throws Throwable { DataSourceSwitcher.setMaster(); // ***** 加上这句解决运行数据库切换问题}
// 抛出Exception之后被调用public void afterThrowing(Method method, Object[] args, Object target, Exception ex) throws Throwable { DataSourceSwitcher.setSlave();log.info("出现异常,切换到: slave");}
4. DataSourceSwitcher 类
public class DataSourceSwitcher {
private static final ThreadLocal contextHolder = new ThreadLocal();
private static final String DATA_SOURCE_SLAVE = "slave" ;
public static void setDataSource(String dataSource) { Assert.notNull(dataSource, "dataSource cannot be null");contextHolder.set(dataSource);}
public static void setMaster(){ clearDataSource();}
public static void setSlave() { setDataSource( DATA_SOURCE_SLAVE);}
public static String getDataSource() { return (String) contextHolder.get();}
public static void clearDataSource() { contextHolder.remove();}}
5. DynamicDataSource 类
public class DynamicDataSource extends AbstractRoutingDataSource {
@Overrideprotected Object determineCurrentLookupKey() { return DataSourceSwitcher.getDataSource();}
}
和 http://my.oschina.net/mrXhuangyang/blog/500743 这个遇到一样问题
另外看到一个文章讲
@Order(-1)
DataSourceAdvice前面加上一个Order注解 可以保证 数据源切换通知 在 事务通知前执行.
dubbo服务+Spring事务+AOP动态数据源切换 出错的更多相关文章
- Spring(AbstractRoutingDataSource)实现动态数据源切换--转载
原始出处:http://linhongyu.blog.51cto.com/6373370/1615895 一.前言 近期一项目A需实现数据同步到另一项目B数据库中,在不改变B项目的情况下,只好选择项目 ...
- Spring(AbstractRoutingDataSource)实现动态数据源切换
转自: http://blog.51cto.com/linhongyu/1615895 一.前言 近期一项目A需实现数据同步到另一项目B数据库中,在不改变B项目的情况下,只好选择项目A中切换数据源,直 ...
- spring AbstractRoutingDataSource实现动态数据源切换
使用Spring 提供的 AbstractRoutingDataSource 实现 创建 AbstractRoutingDataSource 实现类,负责保存所有数据源与切换数据源策略:public ...
- Spring 实现动态数据源切换--转载 (AbstractRoutingDataSource)的使用
[参考]Spring(AbstractRoutingDataSource)实现动态数据源切换--转载 [参考] 利用Spring的AbstractRoutingDataSource解决多数据源的问题 ...
- Spring动态切换多数据源事务开启后,动态数据源切换失效解决方案
关于某操作中开启事务后,动态切换数据源机制失效的问题,暂时想到一个取巧的方法,在Spring声明式事务配置中,可对不改变数据库数据的方法采用不支持事务的配置,如下: 对单纯查询数据的操作设置为不支持事 ...
- Spring主从数据库的配置和动态数据源切换原理
原文:https://www.liaoxuefeng.com/article/00151054582348974482c20f7d8431ead5bc32b30354705000 在大型应用程序中,配 ...
- 【开发笔记】- AbstractRoutingDataSource动态数据源切换,AOP实现动态数据源切换
AbstractRoutingDataSource动态数据源切换 上周末,室友通宵达旦的敲代码处理他的多数据源的问题,搞的非常的紧张,也和我聊了聊天,大概的了解了他的业务的需求.一般的情况下我们都是使 ...
- AbstractRoutingDataSource动态数据源切换,AOP实现动态数据源切换
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明.本文链接:https://blog.csdn.net/u012881904/article/de ...
- 30个类手写Spring核心原理之动态数据源切换(8)
本文节选自<Spring 5核心原理> 阅读本文之前,请先阅读以下内容: 30个类手写Spring核心原理之自定义ORM(上)(6) 30个类手写Spring核心原理之自定义ORM(下)( ...
随机推荐
- winform降低功耗总结
这里整理了一些网上关于Winform如何降低系统内存占用的资料,供参考: 1.使用性能测试工具dotTrace 3.0,它能够计算出你程序中那些代码占用内存较多2.强制垃圾回收3.多dispose,c ...
- javascript基础学习(四)
javascript之流程控制语句 学习要点: 表达式语句含义 选择语句:if.if...else.switch 循环语句:while.do...while.for.for...in 跳转语句:bre ...
- SGU 207.Robbers
题意: 有m(m<=10^4)个金币分给n(n<=1000)个人,第i个人期望得到所有金币的xi/y,现在给分给每个人一些金币ki使得∑|xi/y-ki/m|最小. Solution: 首 ...
- 常见ORACLE错误,及解决方案(遇则即时更新)
1.当登陆时提示“ORA-03113:通信通道的文件结束”时: 解决方案: 需在X:\oraclexe\app\oracle\product\10 ...
- login-登录
<!DOCTYPE html><html><head><meta charset="UTF-8"><title>Inse ...
- Oracle数据库之PL/SQL包
Oracle数据库之PL/SQL包 1. 简介 包(PACKAGE)是一种数据对象,它是一组相关过程.函数.变量.常量和游标等PL/SQL程序设计元素的组合,作为一个完整的单元存储在数据库中,用名称来 ...
- Python--模块微谈
一个.py文件是一个模块,模块里面可以定义很多函数,载入模块就可以使用函数.模块又有python内置模块,又有第三方模块,不同模块里可以有相同的函数名和变量名,模块又可以组织到package里,不同的 ...
- 那些年被我坑过的Python——玄而又玄(第六章 面向对象编程基础)
面向对象编程: 面向对象顾名思义,就是把组织代码的粒度从函数级别抽象到对象级别,对象是通过类来生成的,类可以想象为模板或进本框架而对象是在原有模板或框架的基础上增加详细信息的实体,类,有分类.聚类的含 ...
- STM32学习笔记——DMA控制器(向原子哥学习)
一.DMA简介 DMA,全称为:Direct Memory Access,即直接存储器访问,DMA 用来提供在外设和存储器之间或者存储器和存储器之间的高速数据传输.当 CPU 初始化这个传输动作,传输 ...
- Linux——搭建PHP开发环境第三步:mysql
原文链接:http://www.jb51.net/article/83647.htm 1.第一步就是看linu是否安装了mysql,经过rpm -qa|grep mysql查看到centos下安装了m ...