Sharding-jdbc设置defaultDatasource无效问题解决和源码分析思路

本文详细解析了在使用Sharding-JDBC进行分库分表时,如何正确配置默认数据源,确保未分片的小表能够路由到指定库。通过源码分析,揭示了defaultDataSourceName与bindingTableGroups的关联性,解决实际开发中遇到的路由问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

概要:sharding-jdbc中设置defaultDataSourcceName要配合setBindingTableGroups使用,否则默认数据源的配置无效

背景

在使用sharding-jdbc进行分库分表的开发过程中,我们使用了3个数据源(库):user0,user1,user2中,将主要需要拆分的用户表及相关关系表拆分成了36张表分配在三个库中,而除了这些需要分片的大表,还有一些量比较小的表,都存放在user0这个库中。而由于使用了sharding-jdbc的分片数据源,无法单独设置一个数据源,希望设置一个默认的路由规则,让未配置具体分片的表都路由到user0这个库。

这边找到sharding-jdbc的官方文档的配置手册,其中有这么一项配置:

因此,这边设置:shardingRuleConfig.setDefaultDataSourceName(“user0”)

但是发现,最后在查询未分片表时,没有路由到user0上,而是路由到了user1。这边就只能debug跟着源码一层层调用,看看问题出在哪,为什么defaultDataSourcceName的设置没有生效。

问题解决

在对sharding-jdbc源码进行debug分析后,发现只配置defaultDataSourcceName是不会生效的,必须要配置bindingTableGroups,将所有需要按默认规则路由的表配置进去 ,这里官方文档有点坑,因为并没有说明这两个配置的关联性,而网上也没有查到这类问题。这次解决了问题,也算熟悉了sharding-jdbc的源码。

贴出我的数据源配置(通过java config配置的):

源码分析过程

首先,我们通过setDefaultDataSourceName()这个方法开始,可以看到是直接修改了ShardingRuleConfiguration类的defaultDataSourceName属性,通过idea的find usage功能搜索到这个属性的使用者:

有两个类使用了ShardingRuleConfiguration.defaultDataSourceName,其中的YamlShardingRuleConfiguration这个类只是对yml文件解析为配置的一个类,因此从ShardingDataSourceNames.getDefaultDataSourceName看,:

这里有三个调用者:

  • DefaultDatabaseRoutingEngine
  • ShardingRule
  • TableReferencesClauseParser

从类名来看,我们要找的就是DefaultDatabaseRoutingEngine。而ShardingRule类中主要是给TableBroadcastRoutingEngine和StandardRoutingEngine提供支持,这两个类一个是用于全数据源查找,另一个是需要实现标准路由算法,不符合我们的需求。TableReferencesClauseParser是用于解析SQL的,并未在数据源路由中发挥作用。因此我们下面就是从DefaultDatabaseRoutingEngine着手:

这个类的功能很明显,在route()方法中,将所有逻辑表路由至配置的默认数据源。可以看到logicTable是以对象属性参与到路由逻辑中,因此,真正调用前需要通过构造器来创建这个路由引擎(RoutingEngine)。
我通过查找的引用,找到了创建RoutingEngine的位置:RoutingEngineFactory.newInstance()

从这个方法中可以看到,这里是根据不同的判定条件,将SQL交由不同的RoutingEngine去执行数据源路由。而使用DefaultDatabaseRoutingEngine的条件则在shardingRule.isAllInDefaultDataSource()中,这个方法如下:

  • 对需查询的逻辑表的判断逻辑有三部分:
    1. 配置了路由规则返回false
    2. 配置了广播表规则(查询所有数据源)返回false
    3. 表名不为空

这边我们需要查询的表没有配置路由规则,只在user0中,因此前两项都不满足,所以只要表名(logicTables)不为空,则可以使用DefaultDatabaseRoutingEngine路由至默认数据源。
但是通过Debug发现,我们这边传进来的的tableNames居然为空:

很奇怪为什么我们的SQL没有解析出来tableNames,这里的tableNames()保存在sqlStatement中,而点进去能看到添加tableName的逻辑在TableFiller中:

而通过debug看到,这里的sqlSegment是能拿到tableName的:

那么应该就是fill判定为false导致没有向sqlStatement中添加tableName了,从上图fill()方法中的判断逻辑看,只有满足shardingRule.contains()时,fill才为true,而shardingRule.contains()的代码为:

  • 需要满足三个条件其中之一:
    1. 配置了表分片规则
    2. 配置了绑定表
    3. 配置了广播规则

因此,当我不想配置分片规则,又不想要在所有数据源中广播查询,并需要路由到指定的默认数据源时,必须要配置bindingTableRule,在官方文档中找到设置:bindingTableGroups,也就是得到了上面最开始的结果:setBindingTableGroups()(跳至解决方案)

设置了绑定表后,发现的确在sqlStatement中拿到了tableName,并判定使用DefaultDatabaseRoutingEngine路由至设置的默认的数据源user0,达到了我们的目的。

这次虽然只是解决了一个小问题,但是基本上对sharding-jdbc中sql解析和路由的代码流程有了初步的了解,下次在这里面有什么问题也能更快的定位问题,还是有一定的收获的。

springbooy使用shardingsphere_driud报错日子如下 Error starting ApplicationContext. To display the conditions report re-run your application with 'debug' enabled. 2025-08-11 10:31:45 - Application run failed org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'org.apache.shardingsphere.spring.boot.ShardingSphereAutoConfiguration': Initialization of bean failed; nested exception is java.lang.NoClassDefFoundError: org/apache/tomcat/dbcp/dbcp2/BasicDataSource at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.doCreateBean(AbstractAutowireCapableBeanFactory.java:602) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.createBean(AbstractAutowireCapableBeanFactory.java:516) at org.springframework.beans.factory.support.AbstractBeanFactory.lambda$doGetBean$0(AbstractBeanFactory.java:324) at org.springframework.beans.factory.support.DefaultSingletonBeanRegistry.getSingleton(DefaultSingletonBeanRegistry.java:234) at org.springframework.beans.factory.support.AbstractBeanFactory.doGetBean(AbstractBeanFactory.java:322) at org.springframework.beans.factory.support.AbstractBeanFactory.getBean(AbstractBeanFactory.java:202) at org.springframework.beans.factory.support.ConstructorResolver.instantiateUsingFactoryMethod(ConstructorResolver.java:409) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.instantiateUsingFactoryMethod(AbstractAutowireCapableBeanFactory.java:1341) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.createBeanInstance(AbstractAutowireCapableBeanFactory.java:1181) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.doCreateBean(AbstractAutowireCapableBeanFactory.java:556) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.createBean(AbstractAutowireCapableBeanFactory.java:516) at org.springframework.beans.factory.support.AbstractBeanFactory.lambda$doGetBean$0(AbstractBeanFactory.java:324) at org.springframework.beans.factory.support.DefaultSingletonBeanRegistry.getSingleton(DefaultSingletonBeanRegistry.java:234) at org.springframework.beans.factory.support.AbstractBeanFactory.doGetBean(AbstractBeanFactory.java:322) at org.springframework.beans.factory.support.AbstractBeanFactory.getBean(AbstractBeanFactory.java:207) at org.springframework.context.support.PostProcessorRegistrationDelegate.registerBeanPostProcessors(PostProcessorRegistrationDelegate.java:229) at org.springframework.context.support.AbstractApplicationContext.registerBeanPostProcessors(AbstractApplicationContext.java:723) at org.springframework.context.support.AbstractApplicationContext.refresh(AbstractApplicationContext.java:536) at org.springframework.boot.web.servlet.context.ServletWebServerApplicationContext.refresh(ServletWebServerApplicationContext.java:143) at org.springframework.boot.SpringApplication.refresh(SpringApplication.java:755) at org.springframework.boot.SpringApplication.refresh(SpringApplication.java:747) at org.springframework.boot.SpringApplication.refreshContext(SpringApplication.java:402) at org.springframework.boot.SpringApplication.run(SpringApplication.java:312) at org.springframework.boot.SpringApplication.run(SpringApplication.java:1247) at org.springframework.boot.SpringApplication.run(SpringApplication.java:1236) at com.ahcoder.taskone.TaskOneApplication.main(TaskOneApplication.java:29) Caused by: java.lang.NoClassDefFoundError: org/apache/tomcat/dbcp/dbcp2/BasicDataSource at org.apache.shardingsphere.infra.datasource.pool.metadata.type.dbcp.TomcatDBCPDataSourcePoolMetaData.getType(TomcatDBCPDataSourcePoolMetaData.java:67) at org.apache.shardingsphere.spi.typed.TypedSPIRegistry.lambda$findRegisteredService$0(TypedSPIRegistry.java:44) at java.util.stream.ReferencePipeline$2$1.accept(ReferencePipeline.java:174) at java.util.ArrayList$ArrayListSpliterator.tryAdvance(ArrayList.java:1359) at java.util.stream.ReferencePipeline.forEachWithCancel(ReferencePipeline.java:126) at java.util.stream.AbstractPipeline.copyIntoWithCancel(AbstractPipeline.java:498) at java.util.stream.AbstractPipeline.copyInto(AbstractPipeline.java:485) at java.util.stream.AbstractPipeline.wrapAndCopyInto(AbstractPipeline.java:471) at java.util.stream.FindOps$FindOp.evaluateSequential(FindOps.java:152) at java.util.stream.AbstractPipeline.evaluate(AbstractPipeline.java:234) at java.util.stream.ReferencePipeline.findFirst(ReferencePipeline.java:464) at org.apache.shardingsphere.spi.typed.TypedSPIRegistry.findRegisteredService(TypedSPIRegistry.java:44) at org.apache.shardingsphere.infra.datasource.pool.metadata.DataSourcePoolMetaDataFactory.newInstance(DataSourcePoolMetaDataFactory.java:46) at org.apache.shardingsphere.infra.datasource.props.DataSourceProperties.<init>(DataSourceProperties.java:53) at org.apache.shardingsphere.spring.boot.datasource.DataSourceMapSetter.getDataSource(DataSourceMapSetter.java:92) at org.apache.shardingsphere.spring.boot.datasource.DataSourceMapSetter.getDataSourceMap(DataSourceMapSetter.java:65) at org.apache.shardingsphere.spring.boot.ShardingSphereAutoConfiguration.setEnvironment(ShardingSphereAutoConfiguration.java:122) at org.springframework.context.support.ApplicationContextAwareProcessor.invokeAwareInterfaces(ApplicationContextAwareProcessor.java:108) at org.springframework.context.support.ApplicationContextAwareProcessor.postProcessBeforeInitialization(ApplicationContextAwareProcessor.java:100) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.applyBeanPostProcessorsBeforeInitialization(AbstractAutowireCapableBeanFactory.java:415) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.initializeBean(AbstractAutowireCapableBeanFactory.java:1791) at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.doCreateBean(AbstractAutowireCapableBeanFactory.java:594) ... 25 common frames omitted Caused by: java.lang.ClassNotFoundException: org.apache.tomcat.dbcp.dbcp2.BasicDataSource at java.net.URLClassLoader.findClass(URLClassLoader.java:382) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) ... 47 common frames omitted yml配置文件如下 spring: application: name: task-one # ShardingSphere配置 shardingsphere: mode: type: Standalone # 单机模式 datasource: names: ds-base,ds-2023,ds-2024 default-data-source-name: ds-base # 默认数据源 ds-base: data-source-class-name: com.alibaba.druid.pool.DruidDataSource type: com.alibaba.druid.pool.DruidDataSource driver-class-name: com.mysql.cj.jdbc.Driver url: jdbc:mysql://localhost:3306/practice?useSSL=false&serverTimezone=UTC username: root password: 123456 ds-2023: data-source-class-name: com.alibaba.druid.pool.DruidDataSource type: com.alibaba.druid.pool.DruidDataSource driver-class-name: com.mysql.cj.jdbc.Driver url: jdbc:mysql://localhost:3306/crm_2023?useSSL=false&serverTimezone=UTC username: root password: 123456 ds-2024: data-source-class-name: com.alibaba.druid.pool.DruidDataSource type: com.alibaba.druid.pool.DruidDataSource driver-class-name: com.mysql.cj.jdbc.Driver url: jdbc:mysql://localhost:3306/crm_2024?useSSL=false&serverTimezone=UTC username: root password: 123456 # 分片规则配置 rules: sharding: # 配置分表 tables: # 表名(逻辑表) product_history: # 实际数据节点,格式:数据源名.表名(多个用逗号分隔,这里使用表达式表示多个) actual-data-nodes: ds-$->{2023..2024}.product_history_$->{1..12} # 分库策略 database-strategy: standard: sharding-column: id sharding-algorithm-name: database-inline # 分表策略 table-strategy: standard: sharding-column: id sharding-algorithm-name: table-inline # 分布式主键生成策略 key-generate-strategy: column: id key-generator-name: snowflake # 分片算法配置 sharding-algorithms: database-inline: type: INLINE props: algorithm-expression: ds-$->{id % 3} # 分库规则:按user_id取模,分到3个库 table-inline: type: INLINE props: algorithm-expression: product_history_$->{id % 2} # 分表规则:按user_id取模,分到2个表 # 分布式序列算法配置(雪花算法) key-generators: snowflake: type: SNOWFLAKE props: worker-id: 123 # 其他属性 props: sql-show: true # 打印SQL pom文件如下 <dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.2.8</version> </dependency> <dependency> <groupId>org.apache.shardingsphere</groupId> <artifactId>shardingsphere-jdbc-core-spring-boot-starter</artifactId> <version>5.1.1</version> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency>
最新发布
08-12
评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值