动态数据源的简单使用

动态数据源最佳实战 *** 数据源配置常量类*//*** 默认数据源标识*//*** 从数据源标识*/ 阅读详情

1、前言

当我们需要搭建一个平台给不同的客户群体使用同一套应用时,又需要针对不同的客户群里数据隔离,这就迎来了多租户的时代。

多租户的数据库级别的隔离就需要根据不同租户配置不同的数据源。

Mybatis-plus中提供了动态数据源dynamic-datasource-spring-boot-starter 来实现,详细的使用文档确实收费的,有兴趣的可以付费学习一下。

今天自己实现动态数据源的切换以及新增。

2、关键信息

动态数据源的切换会使用到ThreadLocal 和 AbstractRoutingDataSource。

  • ThreadLocal:主要实现不同线程的资源隔离,用来储存当前线上的数据源标识。
  • AbstractRoutingDataSource: 根据用户定义的规则选择当前的数据源,需要重写抽象方法determineCurrentLookupKey(),决定使用哪一个数据源。

3、环境准备

  • SpringBoot 2.6.13
  • mybatis-plus 3.5.7
  • lombok1.18.24

4、实现ThreadLocal

创建本地线程类,用来保存当前线程的需要使用的数据源简称或者标识。

/**
 *
 *
 * @author: ws
 * @date: 2024/9/18 10:09
 */
public class DataSourceContextHolder {

    private static final ThreadLocal<String> DATASOURCE_CONTEXT = new ThreadLocal<>();

    private  DataSourceContextHolder(){

    }

    public static void setDataSource(String dataSourceName){
        DATASOURCE_CONTEXT.set(dataSourceName);
    }

    public static String getDataSource(){
        return DATASOURCE_CONTEXT.get();
    }

    public static void clearDataSource(){
        DATASOURCE_CONTEXT.remove();
    }
}

5、实现AbstractRoutingDataSource

类的全路径:org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource

定义一个动态加载数据源的类,通过determineCurrentLookupKey()判断最终使用哪个数据源

/**
 * 动态数据源
 *
 * @author: ws
 * @date: 2024/9/6 13:08
 */
@Slf4j
public class DynamicDataSource extends AbstractRoutingDataSource {

    private final Map<Object, Object> targetDataSources = new HashMap<>();

    @Override
    protected Object determineCurrentLookupKey() {
        return DataSourceContextHolder.getDataSource();
    }

    /**
     * 加载所有的数据源
     *
     * @author ws
     * @date 2024/9/18 15:35
     */
    public void createDateSource(List<DataSourceEntity> entityList){
        try{
            if (CollectionUtils.isNotEmpty(entityList)) {
                for (DataSourceEntity entity : entityList) {
                    // 校验数据库连接是否有效
                    log.info("校验数据库连接是否有效>>>>>>>>>>>>>>>>>>>>>>>>>>>>");
                    Class.forName(entity.getDriverClassName());
                    Connection connection = DriverManager.getConnection(entity.getUrl(), entity.getUsername(), entity.getPassword());
                    if (connection != null) {
                        HikariDataSource dataSource = getHikariDataSource(entity);
                        targetDataSources.put(entity.getKey(), dataSource);
                    }

                    super.setTargetDataSources(targetDataSources);
                    //将TargetDataSources中的连接信息放入resolvedDataSources管理
                    super.afterPropertiesSet();
                }
            }
        }catch (Exception e){
            log.error("检查数据源异常:", e);
        }
    }

    public HikariDataSource getHikariDataSource(DataSourceEntity entity) {
        HikariConfig hikariConfig = new HikariConfig();
        hikariConfig.setDriverClassName(entity.getDriverClassName());
        hikariConfig.setJdbcUrl(entity.getUrl());
        hikariConfig.setUsername(entity.getUsername());
        hikariConfig.setPassword(entity.getPassword());

        return new HikariDataSource(hikariConfig);
    }

    /**
     * 动态新增数据源
     *
     * @author ws
     * @date 2024/9/18 15:39
     */
    public void addDateSource(DataSourceEntity entity){
        try {
            log.info("校验数据库连接是否有效>>>>>>>>>>>>>>>>>>>>>>>>>>>>");
            Class.forName(entity.getDriverClassName());
            Connection connection = DriverManager.getConnection(entity.getUrl(), entity.getUsername(), entity.getPassword());
            if (connection != null) {
                // 关闭老的数据库链接
                Map<Object, DataSource> resolvedDataSources = getResolvedDataSources();
                if (CollectionUtils.isNotEmpty(resolvedDataSources)) {
                    resolvedDataSources.forEach((k, v) -> {
                        // 因为这里使用的是HikariDataSource数据源,所以可以直接强转
                        HikariDataSource  hikariDataSource = (HikariDataSource) v;
                        hikariDataSource.close();
                    });
                }

                HikariDataSource dataSource = getHikariDataSource(entity);
                targetDataSources.put(entity.getKey(), dataSource);
            }

            super.setTargetDataSources(targetDataSources);
            //将TargetDataSources中的连接信息放入resolvedDataSources管理
            super.afterPropertiesSet();
        } catch (Exception e) {
            throw new RuntimeException(e);
        }
    }
}

其中createDateSource() 用来加来所有的数据源,博文中使用的数据源是HikariDataSource 。
addDateSource()是动态的新增一个新的数据源,并重新初始化所有的数据源信息。

determineCurrentLookupKey() 直接从DataSourceContextHolder 中获取当前数据源的简称。

6、数据源信息实体DataSourceEntity

DataSourceEntity 记录数据源的链接信息以及别名简称

@Data
@NoArgsConstructor
@AllArgsConstructor
public class DataSourceEntity implements Serializable {

    private static final long serialVersionUID = 1584256444573613974L;

    /**
     * 数据源的Key
     */
    private String key;

    /**
     * 数据库连接地址
     */
    private String url;

    /**
     * 用户名
     */
    private String username;

    /**
     * 密码
     */
    private String password;

    /**
     * 驱动
     */
    private String driverClassName;
}

7、数据源的配置

Spring容器启动的时候加载一个数据源

@Configuration
public class DataSourceConfig {

    @Bean
    public DynamicDataSource dynamicDataSource(){
        DynamicDataSource dynamicDataSource = new DynamicDataSource();

        List<DataSourceEntity> dsList = new ArrayList<>();
        dsList.add(new DataSourceEntity("dev", "jdbc:mysql://127.0.0.1:3306/test?characterEncoding=utf-8", "root", "root", "com.mysql.cj.jdbc.Driver"));
        dynamicDataSource.createDateSource(dsList);
        return dynamicDataSource;
    }
}

8、测试控制层

其中类似AuctionPlanMapper 使用的Mybatis-plus,可以自行生成。dev和test笔者在测试的时候分别代表的不同的开发测试库和测试数据库。

/**
 * TODO
 *
 * @author: ws
 * @date: 2024/9/18 10:20
 */
@RestController
public class TestController {

    @Resource
    private AuctionPlanMapper auctionPlanMapper;
    @Resource
    private DynamicDataSource dynamicDataSource;


    @GetMapping("/testDev")
    public Object testDev(){
        DataSourceContextHolder.setDataSource("dev");
        AuctionPlanExt auctionPlanExt = auctionPlanMapper.selectById(3);
        DataSourceContextHolder.clearDataSource();
        return auctionPlanExt;
    }

    @GetMapping("/testInt")
    public Object testInt(){
        DataSourceContextHolder.setDataSource("test");
        AuctionPlanExt auctionPlanExt = auctionPlanMapper.selectById(3);
        DataSourceContextHolder.clearDataSource();
        return auctionPlanExt;
    }

    @GetMapping("/addDataSource")
    public String addDataSource(){
        DataSourceEntity dataSourceEntity = new DataSourceEntity("test", "jdbc:mysql://127.0.0.1:3306/test02?characterEncoding=utf-8", "root", "root", "com.mysql.cj.jdbc.Driver");
        dynamicDataSource.addDateSource(dataSourceEntity);
        return "success";
    }
}

9、项目测试

在这里插入图片描述因为配置中只加载了一个数据源,所以只检测了一个数据源。

9.1 测试/testDev

在这里插入图片描述

9.2 测试/testInt

在这里插入图片描述报错了,因为笔者没有配置test的地址。

9.3 测试/addDataSource

在这里插入图片描述从日志可以看出,加载了两个数据源。

9.4 重新测试/testInt

在这里插入图片描述
结果有了。返回单额数据和dev的数据不一致,确实是两个库的数据。

j2se环境jpa的实现和简单动态切换数据源 项目中持久层用的eclipselink,有个需求是动态切换数据源,首先做了个demo,先在j2se的环境中实现,然后再尝试加到项目中。                 1、创建jpa项目,创建环境,创建eclipselink的user library,用于jpa项目                     2、创建jpa项目,将上一步创建的user library加入项目:        阅读详情

相关推荐

BEVFormer vs BEVFusion:5个关键差异点帮你选对环视感知方案

本文深入对比了自动驾驶领域两大主流环视感知方案BEVFormer与BEVFusion。BEVFormer作为纯视觉BEV感知的标杆,通过注意力机制隐式学习深度,成本较低;而BEVFusion作为多模态融合典范,融合激光雷达与摄像头数据,在性能、小目标检测及极端环境鲁棒性上优势显著。文章从计算效率、部署成本、数据依赖性等五个核心维度提供选型指南,帮助技术决策者根据自身算力预算与传感器配置做出明智选择。

weixin_29306011的博客 124

SpringBoot——动态数据源(多数据源自动切换)

日常的业务开发项目中只会配置一套数据源,如果需要获取其他系统的数据往往是通过调用接口, 或者是通过第三方工具比如kettle将数据同步到自己的数据库中进行访问。但是也会有需要在项目中引用多数据源的场景。自研数据迁移系统,至少需要新、老两套数据源,从老库读取数据写入新库自研读写分离中间件,系统流量增加,单库响应效率降低,引入读写分离方案,写入数据是一个数据源,读取数据是另一个数据源。

quanzhan_King的博客 1万+

逆向Shopee签名机制:从参数分析到稳定采集方案

本文深入解析了Shopee签名机制的逆向过程,从参数分析到稳定采集方案的实现。通过抓包定位关键参数`sap-ri`和`x-sap-sec`,还原了签名生成算法,并提供了Python实现代码。文章还分享了反反爬策略、性能优化技巧及长期维护建议,帮助开发者构建稳定的Shopee数据采集方案。

weixin_27722377的博客 679

Java SpringBoot 动态数据源

SpringBoot 基于 AbstractRoutingDataSource 实现动态数据源,实现使用注解切换当前数据源

qq_44704799的博客 2778

STM32 野火MINI 用FontCvtST.exe 生成.c文件 写汉字到文本框 按钮上

STM32 野火MINI 用FontCvtST.exe 生成.c文件 写汉字到文本框 按钮上 参考了好多大神博客,自己写的过程中发现,还有些小细节。 一、打开Notepad写需要的字 另存为 UTF-16LE 也就是Unicode。 二、打开FontCvtST转 删掉所有字 读入test.txt里的字 选择刚才的test.txt 另存为.c文件 改个英文名 复制到RTOS的例程文件夹下 三、打开GUIBuilder 画一个这样的 保存之前要注意路径配置要在当前位置,否则存不上 生成的D

weixin_41376117的博客 1939

IGBT单管并联方案全解析:从均流设计到热管理实战技巧

本文深入解析了IGBT单管并联技术在新能源车电驱系统中的应用,重点探讨了均流设计与热管理实战技巧。通过优化寄生电感控制、动态均流和驱动电路设计,提升系统稳定性和效率,为工程师提供了一套完整的解决方案。

weixin_28720573的博客 442

Spring Boot使用动态数据源

动态数据源 Hikari

qq_33594592的博客 1万+

LS-DYNA壳单元冲击仿真中的5个关键设置:以方管碰撞为例(含沙漏控制参数)

本文以方管碰撞为例,深入解析了LS-DYNA壳单元冲击仿真中的五个关键设置。重点探讨了沙漏控制参数(如IHQ=4)的选择逻辑、自接触算法优化、能量监控方法、材料模型(MAT_24)的真实应力-应变曲线与应变率效应设置,以及单元公式的选取。这些核心设置共同决定了仿真的精度与效率,是确保方管冲击仿真结果可靠性的基石。

salt的博客 627

架构(十)Mybatis动态数据源及其原理

作者最近的平台项目需要一个功能,数据库是动态的,sql也是动态的,所以需要动态注入数据源,并且能够在运行过程中进行切换数据库。作者在这里分享一下做法,以及Mybatis这样做的原理。

m0_69270256的博客 1万+

innovus:set_clock_latency与insertion_delay

当1ns clock latency设置在capture上,在report_timing报告中体现在other end arrival time以及capture clock path的Arrival Time上。因为-1ns的insertion delay存在,所以skew group报告中显示的Arrival (ns)是减1ns的结果,即1.819-1=0.819 ns。CTS阶段create_ccopt_clock_tree_spec之后,spec中会产生对应的insertion_delay命令。

m0_61544122的博客 1630

17track单号查询逆向分析

这就说明该网站很有可能存在其它检测点,而检测本地替换最大可能的就是检测了代码格式化或者代码长度。也一样,要么导致网站卡死,要么会导致网页加载异常,这里可能就难到不少人了,让我们一步一步解决。而这个站主要是检测了代码格式化,无限循环检测造成了网站卡死,经多次测试发现检测点共三处。方法中代码很长,但是经调试后发现,它其实只返回一个固定的值,这里直接写死即可。同样的,虽然看起来很长,但是跟过之后就会发现流程很简单,这里主要就是对。追加了一些值,是一条很长的语句,整理代码。,核心流程也很简单,稍微跟一下就出来了,

pyzzd的博客 1625

动态数据源的简单配置使用

主要在多租户场景中,常常新的一个租户进来需要动态的添加一个数据源到库中,使得系统不用重启即可切换数据源。

huofuman960209的博客 3760

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

动态数据源与多数据库简单使用

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar

qq_35913663的博客 1480

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

动态数据源实现+源码解析

读取配置文件后,编写一个类用于创建数据源,该类中的函数接收DataSourceProperty作为入参,同时启动时加载druid和hikari数据源。数据源配置信息已经准备,调用和创建数据源的bean也已经准备完毕,接下来的问题就是什么时候创建数据源,如何存储这些数据源。在数据源配置和数据源创建过程中,加了一层provider 用来获取数据源配置信息,并调用创建函数创建数据源。初始化数据源==》创建切点(注解)==》拦截含有特定注解的切点==》动态的选择数据源。核心内容存储在datasource中。

weixin_40663313的博客 941

贝叶斯统计 [韦来生编]

贝叶斯(Bayes)统计是近几十年来迅速发展起来的数理统计的一个重要分支。贝叶斯方法与经典统计方法的主要不同之处是进行统计推断时除了利用样本信息外,还要利用参数的先验信息,因此可以提高统计推断或统计决策的效果。它在经济、金融、生物、医学、自然科学和社会科学等许多领域具有广泛的应用。贝叶斯方法的研究已渗透到了统计学的几乎所有领域。作者在给中国科学技术大学概率论与数理统计专业本科生开设的“数理统计”课程中有一章专门讲授“贝叶斯方法和统计决策理论”,近十年来也给中国科学技术大学概率统计专业研究生开设过几次“贝叶斯分析”课。本书是在对过去讲稿的内容作了适当的增减和调整的基础上完成的。  本书共分六章。第1章是绪论,介绍了贝叶斯统计的若干基本概念,同时对必要的数理统计的基础知识有重点地作了回顾。第二章介绍了确定先验分布的若干可供选择的方法。第三章介绍了几类常见统计模型参数的后验分布的主要结果和计算方法。第四章和第五章分别介绍了“贝叶斯统计推断”和“贝叶斯统计决策”的内容。第六章介绍了贝叶斯统计计算的若干方法,包括蒙特卡洛方法和马尔可夫链蒙特卡洛(MCMC)方法以及相关统计软件的简介。本书的每一章附右大量的例题和习题,书末附有常用的几个表格和部分习题解答供读者查用。  大约可在54学时内讲授本书的第1章至第六章的主要内容,教师可根据学时需要选讲本书第1章至第六章的部分内容。书中标“*”号的章节可略去不讲,留给读者作为阅读材料。第六章例题中的R代码和部分例题的数据文件等可从作者个人主页下载。  作者在编写本书的过程中参考了J.O.Berger教授的《统计决策论及贝叶斯分析》和茆诗松教授编写的《贝叶斯统计》等书中的一些内容,以及《贝叶斯分析》一书中由张伟平博士编写的有关贝叶斯统计计算的一些内容。在此表示衷心感谢。  本书编写准备过程中,中国科学技术大学统计与金融系的几个研究生帮助完成了本书部分中文的录入和排版,作者对他们的辛勤工作表示真诚的感谢。高等教育出版社为本书的出版给予了大力支持。在此一并致谢。

Jasper 怎么配置动态数据源

Jasper 本身是不支持动态数据源的,能用的解决方式是通过 api 自定义数据源,实际操作就是根据条件判断后动态设定 jdbc 的 url、用户名及密码等连接属性。比如: String userName = userDetails.getUsername(); // obtain a connection based on the username. String dataSourceURI = ""; if (userName.equalsIgnoreCase("admin")) { da

rqgxy的博客 604

springboot使用DynamicDataSource来动态切换数据源

在该类中重写**determineCurrentLookupKey()**方法,该方法返回一个字符串,用于指示当前要使用哪个数据源。

weixin_46931883的博客 9380

MybatisPlus动态数据源模块源码分析

好久不见,25年三月份换了工作,来到新的公司,发现现公司用到了MP的多数源,便以此为契机,,分析一下MP的数据源模块,以及项目迁移上线前夕发现主从配置和多数源切换的冲突问题,以及如何解决此问题,都需要对源码稍微有点了解,总的目的就是知其所以然,废话就不多说直接分析!

qq_33549942的博客 1128

Mybatis动态数据源-分库分表简单版实现

1、动态数据源【分库】 分库有两种选择方案: 用dao接口注解+切面实现动态数据源 利用表字段分库策略实现 此处采用第一种方案,第二种方案我将在分表是实现; 1.1 环境搭建 引入以下依赖 <dependency> <groupId>org.mybatis.spring.boot</groupId> <artifactId>mybatis-spring-boot-starter</arti

脚踏实地 2283

springboot动态切换数据源_如何在程序运行中动态切换数据源?架构师必读秘笈...

说起动态数据源,大家应该也不陌生。例如在读写分离系统中,则要对请求中的读写操作进行分离,让读和写落在不同的数据库上;例如在多租户系统中,则要根据请求来源租户的不同,让其落在不同租户的数据库上;例如在分库应用中,也要根据不同的规则让请求落在不同的数据库上。于是,我们的应用要根据请求的不同,操作不同的数据库,这时就需要动态数据源的帮助。DynamicDataSource就是一个出色的动态数据源,他能让...

weixin_39756192的博客 351

java创建数据源_Java程序动态创建ODBC数据源

通过Java动态创建ODBC数据源来访问DBF文件,需要用到registry,来修改注册表。其实,主要是动态创建ODBC数据源,开始很简单,可以手工设置一次数据源,当然也可以通过程序直接生成,问题都不大。下面只说怎样修改。import com.ice.jni.registry.RegStringValue;import com.ice.jni.registry.Registry;import co...

weixin_35048609的博客 228

在SpringBoot项目中配置动态数据源

在我们工作中涉及到一些场景需要我们配置多数据源的操作,之前来说我们配置数据源需要写繁琐的配置类来配置我们的数据源,哪个是默认数据源等等,而现在我们可以使用“苞米豆”为我们提供的提供的第三方工具,只需要简单配置就可以实现多数据源之间的灵活切换了! 首先需要引入第三方依赖 <dependency> <groupId>com.baomidou</groupId> <artifactId>dynamic-datasource...

梧桐树的博客 1698
上一篇: 基于Netty的websocket的简单介绍
下一篇: 数据库同步工具-Bifrost
智_永无止境
博客等级 码龄10年 803粉丝 407原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

智_永无止境

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值