spring动态创建数据源
在最近的项目业务中,需要在程序的运行过程中,添加新的数据库添链接进来,然后从新数据库链接中读取数据。
网上查阅了资料,发现spring为多数据源提供了一个抽象类AbstractRoutingDataSource,该类中只有一个抽象方法determineCurrentLookupKey()需要由我们实现。
以下是使用方法
假设我们创建一个类DynimaticDataSource,继承AbstractRoutingDataSource,并重写determineCurrentLookupKey()方法。
spring启动初始化DynimaticDataSource:
1、可以通过spring的自动注入,对AbstractRoutingDataSource类注入相应的属性,注入属性不是必须的,可以通过继承的子类重写这些方法来重新设置对这些属性的调用。
2、注入后spring会执行protected方法afterPropertiesSet(),该方法先判断属性targetDataSources不能为null,即必须初始化时注入至少一个数据源,否则抛出异常"Property 'targetDataSources' is required"。然后将该属性(类型为map<object,object>)的值全部转换到属性resolvedDataSources(类型为map<Object, DataSource>)中去。如果属性defaultTargetDataSource不为null,即已经设置默认数据源,将其转换为DataSource类型并赋值给属性defaultTargetDataSource。
经过以上处理后,属性resolvedDataSources中会被存放我们添加的数据源,该属性是一个map集合,key为Object类型,value为数据源。同时可能会有一个默认数据源(可以注入也可以不注入)。
使用DynimaticDataSource类获取连接:
1、调用该类的public方法getConnection()来获取连接。
2、getConnection在抽象类中被重写,会先调用protected方法determineTargetDataSource()。该方法先判断属性resolvedDataSources不为null,即初始化时候注入了至少一个数据源,否则抛出异常"DataSource router not initialized"。然后调用由子类重写的抽象方法determineCurrentLookupKey()获取dataSource在resolvedDataSources中对应的key,判断使用哪个数据源。
3、根据key从resolvedDataSources中获取数据源,如果resolvedDataSources中不存在,再判断lenientFallback为true(默认为true,可以设置)或key为null,返回默认数据源resolvedDefaultDataSource。否则抛出异常"Cannot determine target DataSource for lookup key [" + key+ "]"。
4、调用获取数据源的getConnection()方法获取连接。
在初始化时指定多数据源案例代码:
1、创建一个类DynimaticDataSource,继承AbstractRoutingDataSource,并重写determineCurrentLookupKey()方法。该方法负责判断当前线程使用哪一种数据源。这是最简单的一种实现方法,不重写任何非抽象方法,但必须在初始化时配置至少一个的数据源。
public class DynamicDatasource extends AbstractRoutingDataSource{
private static Map<Object, Object> targetDataSources;
protected DruidDataSource dataSource;
@Override
protected String determineCurrentLookupKey() {
//指定使用哪个数据源
return DataSourceUtils.getDbtype();
}
}
2、srping配置文件(部分)
<bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" destroy-method="close">
<property name="url" value="${jdbc.url}" />
<property name="username" value="${jdbc.username}" />
<property name="password" value="${jdbc.password}" />
<property name="driverClassName" value="${jdbc.driver}" />
<property name="maxActive" value="50" /><!-- 最大连接池数 -->
<property name="minIdle" value="5" /><!-- 最小连接池数 -->
</bean> <bean id="dataSource2" class="com.alibaba.druid.pool.DruidDataSource" destroy-method="close">
<property name="url" value="${jdbc.url2}" />
<property name="username" value="${jdbc.username2}" />
<property name="password" value="${jdbc.password2}" />
<property name="driverClassName" value="${jdbc.driver}" />
<property name="maxActive" value="50" /><!-- 最大连接池数 -->
<property name="minIdle" value="5" /><!-- 最小连接池数 -->
</bean> <bean id="multDataSource" class="com.ftpSystem.dao.DynamicDatasource">
<property name="targetDataSources">
<map >
<entry value-ref="dataSource" key="masterDataSource"></entry>
<entry value-ref="dataSource2" key="yangDataSource"></entry>
</map>
</property>
<property name="defaultTargetDataSource" ref="dataSource"></property>
</bean>
3、使用数据源,我这里使用jdbcTemple,可以使用其他持久层框架,方式同单数据源配置一致。
<bean id="jdbcTemplate" class="org.springframework.jdbc.core.JdbcTemplate">
<property name="dataSource" ref="multDataSource"></property>
</bean>
4、切换数据源类
public class DataSourceUtils {
private static final ThreadLocal<String> local = new ThreadLocal<String>();
public static String getDbtype() {
return local.get();
}
public static void setDbtype(String dbtype) {
local.set(dbtype);
}
public static void clear() {
local.remove();
}
}
5、客户端代码
@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration("classpath:applicationContext-dao.xml")
public class TestDao { @Autowired
private JdbcTemplate jdbcTemplate; @Test
public void Test(){
System.out.println("ok");
int i = (Integer) jdbcTemplate.queryForObject("select count(*) from t_gg_zsdw", Integer.class);
System.out.println("i="+i);
DataSourceUtils.setDbtype("dataSource2");//切换数据源至dataSource2
i = (Integer) jdbcTemplate.queryForObject("select count(*) from t_gg_zsdw", Integer.class);
System.out.println("i="+i);
}
}
由于我们已经在spring的配置文件中指定了属性defaultTargetDataSource,因此程序会默认使用该数据源。然后我们执行一次后切换为dataSource2,之后的执行会改为使用dataSource2的数据源。
以上方式可以对程序配置多数据源,但是缺点在程序初始化之时就指定所有的数据源,无法在运行时动态添加。
程序动态配置多数据源:
通过最上面我们对获取DynimaticDataSource对象的数据源连接的过程分析可知,AbstractRoutingDataSource类是通过determineTargetDataSource()方法来获取数据源。在该方法里面,又使用了我们重写的抽象方法determineCurrentLookupKey()来判断使用哪一个数据源的key,通过这个key,在数据源初始化后存放的集合resolvedDataSources中获取想要的数据源。
因此,如果我们想要动态的添加数据源进去,有两种思路可以考虑,一是重写determineTargetDataSource()方法,并且我们自己配置一个数据源集合,通过该方法,调用我们自己的数据源集合中对应的数据源。二是在resolvedDataSources属性中动态添加key-value进去,可以在determineTargetDataSource()方法中获取该数据源即可。
通过对源码查看可知,第二种思路所需的属性resolvedDataSources是私有的,且类中没有提供相应的get方法获取。因此只能采用第一种方式。
样例如下:
先是继承AbstractRoutingDataSource的实体类
/**
* 数据源集合管理类
* 使用数据源之前必须先添加,然后指定使用哪个数据源
* @author yangxiangfeng
*
*/
public class DynamicDatasource extends AbstractRoutingDataSource { private static Map<String, DataSource> dataSourceMap = new HashMap<String, DataSource>(); private final static Map<DataSourceEntity, String> dseMap = new HashMap<>();
//spring注入需要set方法,不是必要的,可以注入也可以不注入
public static void setDataSourceMap(Map<String, DataSource> dataSourceMap) {
DynamicDatasource.dataSourceMap = dataSourceMap;
}
//获取数据源信息集合
public static Map<DataSourceEntity, String> getDsemap() {
return dseMap;
} //检查是否包含指定id的数据源
public static boolean checkDbKey(String dbKey){
if(dataSourceMap.get(dbKey) != null)return true;
return false;
}
//抽象方法,必须重写,用来判断使用哪个数据源
@Override
protected String determineCurrentLookupKey() {
return DataSourceUtils.getDbKey();
} /**
* 对数据源的初始化方法,由于这里已经将数据源集合放在本类中,如果不重写将会由于父类参数为null而抛出异常。
*/
@Override
public void afterPropertiesSet() {} /**
* 确定使用哪一个数据源
* 这里不做null判断,因为是经过null判断后再进入的。
*/
@Override
protected DataSource determineTargetDataSource() {
System.out.println("tttt");
String dsKey = determineCurrentLookupKey();
DataSource dds = dataSourceMap.get(dsKey);
return dds;
} /**
* 添加数据源
* 为了防止多线程添加同一个数据源,这里采用同步,同时会判断是否已存在
* @param dbkey
* @param ip
* @param port
* @param service 实例名
* @param username
* @param password
* @return String 新建数据源对应的key,如果已经存在,则返回之前的key。
*/
public synchronized String addDataSource(String dbkey, String ip,
int port, String service, String username, String password){
DataSourceEntity d1 = new DataSourceEntity(ip, port, service, username);
String value = dseMap.get(d1);
if(dseMap.get(d1) != null){
return value;//已存在则返回该数据源的id
} DataSource ds = createDataSource(ip, port, service, username, password);
dataSourceMap.put(dbkey, ds);//存储数据源集合
dseMap.put(d1, dbkey);//保存已经存储了哪些数据源 return dbkey;
} /**
* 创建一个数据源
* @param ip
* @param port
* @param service
* @param username
* @param password
* @return
*/
private DataSource createDataSource(String ip, int port, String service, String username, String password){
DruidDataSource dds = new DruidDataSource();
dds.setDriverClassName("oracle.jdbc.driver.OracleDriver");
dds.setUrl("jdbc:oracle:thin:@"+ip+":"+port+":"+service);
dds.setUsername(username);
dds.setPassword(password);
return dds;
}
2、切换数据源的工具类
public class DataSourceUtils {
private static final ThreadLocal<String> local = new ThreadLocal<String>();
public static String getDbKey() {
return local.get();
}
public static void setDbKey(String dbKey) {
if(DynamicDatasource.checkDbKey(dbKey)){
local.set(dbKey);
} else {
throw new NullPointerException("不存在id为\""+dbKey+"\"的数据源!");
}
}
public static void clear() {
local.remove();
}
}
客户端测试类
@Test
public void Test(){
System.out.println("ok");
//增加数据源
dynamicDatasource.addDataSource("dataSource", "***.***.**.***", ****, "***", "***", "*****");
//指定使用的数据源
DataSourceUtils.setDbKey("dataSource");
//执行sql
int i = (Integer) jdbcTemplate.queryForObject("select count(*) from tablename", Integer.class);
System.out.println("i="+i);
}
以上代码是经过测试后可以直接运行的,由于本人能力有限,综合考虑后对spring中动态创建数据源的实现如上。欢迎各位指点可以优化改进的地方。
spring动态创建数据源的更多相关文章
- spring 动态创建数据源
项目需求如下,公司对外提供服务,公司本身有个主库,另外公司会为每个新客户创建一个数据库,客户的数据库地址,用户名,密码,都保存在主数据库中.由于不断有新的客户加入,所以要求,项目根据主数据库中的信息, ...
- Spring 动态创建并切换数据源
公司要求后端项目可以进行动态创建并切换数据源,看了网上很多例子大多数使用的都是Spring内置的AbstractRoutingDataSource进行的,使用此方法不是不行但是有诸多缺陷,比如切换时需 ...
- Spring动态切换数据源及事务
前段时间花了几天来解决公司框架ssm上事务问题.如果不动态切换数据源话,直接使用spring的事务配置,是完全没有问题的.由于框架用于各个项目的快速搭建,少去配置各个数据源配置xml文件等.采用了动态 ...
- spring动态切换数据源(一)
介绍下spring数据源连接的源码类:| 1 spring动态切换连接池需要类AbstractRoutingDataSource的源码 2 /* 3 * Copyright 2002-2017 the ...
- Spring 动态多数据源
spring springmvc mybatis 多数据源配置时的重点: 1. 注意事务拦截器的配置 Spring中的事务管理与数据源是绑定的,一旦程序执行到Service层(事务管理)的话,由于在进 ...
- Spring动态切换数据源
11 //定义数据源枚举public enum DataSourceKey { master, slave, } 22 /** * 数据源路由 */ @Slf4j public class Dynam ...
- 一文读懂Spring动态配置多数据源---源码详细分析
Spring动态多数据源源码分析及解读 一.为什么要研究Spring动态多数据源 期初,最开始的原因是:想将答题服务中发送主观题答题数据给批改中间件这块抽象出来, 但这块主要使用的是mq消息的方式 ...
- 动态添加数据源,根据用户登录切换数据库.编程式Spring事务.
根据用户注册,系统自动创建私有数据库,用户登录,动态添加数据源到Spring数据路由,Session超时删除数据源 好处:当数据量大的时候,类似水平切割效果,效率会高一些 坏处:数据源切换,Sprin ...
- Spring动态数据源实现读写分离
一.创建基于ThreadLocal的动态数据源容器,保证数据源的线程安全性 package com.bounter.mybatis.extension; /** * 基于ThreadLocal实现的动 ...
随机推荐
- Sklearn的使用
初步接触要求时,从上图选自己数据所适用的方法, 首先看数据的样本是否 >50,小于则需要收集更多的数据 然后看问题适合分类.回归.聚类.降维中的哪一大类 Sklearn解决问题的一般步骤: 1. ...
- Bootstrap-媒体查询-屏幕大小
.container{padding:0 15px; margin:0 auto;} .container:before{ content: ''; display: table;/*防止第一个子元素 ...
- hdu5290树形dp
题意 给了n个点的数 每个点有一个w[i]权值,如果你选择了i这个点那么距离i这个点距离为w[i]的点将被除去,最后问 选则尽量少的点把这n个点全部删除 1<=n<=100000, 0&l ...
- 20155228 2016-2017-2 《Java程序设计》第5周学习总结
20155228 2016-2017-2 <Java程序设计>第5周学习总结 教材学习内容总结 异常处理 try-catch语法:JVM执行try区块中的代码,如果发生错误就会跳到catc ...
- Spark学习之路 (十七)Spark分区
一.分区的概念 分区是RDD内部并行计算的一个计算单元,RDD的数据集在逻辑上被划分为多个分片,每一个分片称为分区,分区的格式决定了并行计算的粒度,而每个分区的数值计算都是在一个任务中进行的,因此任务 ...
- Linux 中常用的命令
Linux中的常用命令: 终端快捷键: Ctrl + a/Home 切换到命令行开始 Ctrl + e/End 切换到命令行末尾 Ctrl + l 清除屏幕内容,效果等同于clear Ctrl + u ...
- volatile 线程内存模型
- DBUtils (30)
DBUtils是java编程中的数据库操作实用工具,小巧简单实用. DBUtils封装了对JDBC的操作,简化了JDBC操作,可以少写代码. Dbutils三个核心功能介绍 一. QueryRunn ...
- 关于Weex你需要知道的一切
QCon第一天,GMTC全球移动技术大会联席主席.手淘技术老大庄卓然(花名南天)在Keynote上宣布跨平台开发框架Weex开始内测,并将于6月份开源,同时他们也放出官网:http://alibaba ...
- 每日linux命令学习-lsattr和chattr
lsattr和chattr命令 1. lsattr命令 作用: 显示文件属性 语法: lsattr [-adlRvV][files...] 参数: -a 显示所有文件和目录(包括隐藏文件)的属性. - ...