【Spring技术专题】「实战开发系列」保姆级教你SpringBoot整合Mybatis框架实现多数据源的静态数据源和动态数据源配置落地

本文涉及的产品
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS DuckDB + QuickBI 企业套餐,8核32GB + QuickBI 专业版
简介: Mybatis是一个基于JDBC实现的,支持普通 SQL 查询、存储过程和高级映射的优秀持久层框架,去掉了几乎所有的 JDBC 代码和参数的手工设置以及对结果集的检索封装。Mybatis主要思想是将程序中大量的 SQL 语句剥离出来,配置在配置文件中,以实现 SQL 的灵活配置。在所有 ORM 框架中都有一个非常重要的媒介——PO(持久化对象),PO 的作用就是完成持久化操作,通过该对象对数据库执行增删改的操作,以面向对象的方式操作数据库。

Mybatis是什么

Mybatis是一个基于JDBC实现的,支持普通 SQL 查询、存储过程和高级映射的优秀持久层框架,去掉了几乎所有的 JDBC 代码和参数的手工设置以及对结果集的检索封装。

Mybatis主要思想是将程序中大量的 SQL 语句剥离出来,配置在配置文件中,以实现 SQL 的灵活配置。在所有 ORM 框架中都有一个非常重要的媒介——PO(持久化对象),PO 的作用就是完成持久化操作,通过该对象对数据库执行增删改的操作,以面向对象的方式操作数据库。

SpringBoot整合Mybatis框架实现多数据源操作

当我们使用SpringBoot整合Mybatis时,我们通常会遇到多数据源的问题。在这种情况下,我们需要使用动态数据源来处理多个数据源。本文将介绍如何使用SpringBoot整合Mybatis的多数据源和动态数据源。

应用场景

项目需要同时连接两个不同的数据库A, B,并且它们都为主从架构,一台写库,多台读库。

选择和配置Maven依赖

使用SpringBoot整合Mybatis需要添加Maven起步依赖,如下所示。

<dependency>
    <groupId>org.mybatis.spring.boot</groupId>
    <artifactId>mybatis-spring-boot-starter</artifactId>
    <version>x.x.x</version>
</dependency>
<dependency>
    <groupId>mysql</groupId>
    <artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
    <groupId>com.alibaba</groupId>
    <artifactId>druid-spring-boot-starter</artifactId>
    <version>x.x.xx</version>
</dependency>

这些依赖将帮助我们整合Mybatis和Druid数据源。

禁掉DataSourceAutoConfiguration

首先,要将spring boot自带的DataSourceAutoConfiguration禁掉,因为它会读取application.properties文件的spring.datasource.* 属性并自动配置单数据源。

去除DataSourceAutoConfiguration

在@SpringBootApplication注解中添加exclude属性即可。

@SpringBootApplication(exclude = {
   
   DataSourceAutoConfiguration.class})
public class WebApplication {
   
   
    public static void main(String[] args) {
   
   
        SpringApplication.run(WebApplication.class, args);
    }
}

定制化配置对应的数据源

由于我们禁掉了自动数据源配置,因些下一步就需要手动将这些数据源创建出来。

配置主、从数据源

当接下来,我们需要配置数据源时,我们需要在application.properties文件中创建多个数据源的配置块。为了区分不同的数据源,我们可以使用spring.datasource.druid.* 前缀。

以下是一个示例,我们定义了两个数据源:主数据源和从数据源,并且我们使用Druid数据源来管理它们。在application.properties中的配置如下所示:

主数据源

spring.datasource.druid.master.url=jdbc:mysql://localhost:3306/master?useUnicode=true&characterEncoding=utf-8&useSSL=false
spring.datasource.druid.master.username=root
spring.datasource.druid.master.password=root
spring.datasource.druid.master.driver-class-name=com.mysql.jdbc.Driver

从数据源

spring.datasource.druid.slave.url=jdbc:mysql://localhost:3306/slave?useUnicode=true&characterEncoding=utf-8&useSSL=false
spring.datasource.druid.slave.username=root
spring.datasource.druid.slave.password=root
spring.datasource.druid.slave.driver-class-name=com.mysql.jdbc.Driver

通过以上配置,我们成功地定义了两个数据源,并使用了Druid数据源来管理它们。这样的配置可以确保应用程序能够顺利地访问并管理多个数据源。

配置Mybatis和定义主从数据源对象

接下来,我们需要配置Mybatis。我们需要为每个数据源创建一个SqlSessionFactory。以下是一个示例:

@Configuration
@MapperScan(basePackages = "com.xx.xxx.mapper")
public class DynamicDataSourceConfiguration {
   
   

    @Bean(name = "masterDataSource")
    // application.properteis中对应属性的前缀
    @ConfigurationProperties(prefix = "spring.datasource.druid.master")
    public DataSource masterDataSource() {
   
   
        return DruidDataSourceBuilder.create().build();
    }

    @Bean(name = "slaveDataSource")
    // application.properteis中对应属性的前缀
    @ConfigurationProperties(prefix = "spring.datasource.druid.slave")
    public DataSource slaveDataSource() {
   
   
        return DruidDataSourceBuilder.create().build();
    }

    @Bean(name = "dynamicDataSource")
    public DataSource dynamicDataSource(@Qualifier("masterDataSource") DataSource masterDataSource,
                                         @Qualifier("slaveDataSource") DataSource slaveDataSource) {
   
   
        DynamicDataSource dynamicDataSource = new DynamicDataSource();
        Map<Object, Object> targetDataSources = new HashMap<>();
        targetDataSources.put(DataSourceType.MASTER, masterDataSource);
        targetDataSources.put(DataSourceType.SLAVE, slaveDataSource);
        dynamicDataSource.setTargetDataSources(targetDataSources);
        dynamicDataSource.setDefaultTargetDataSource(masterDataSource);
        return dynamicDataSource;
    }
}

方案1:MapperScan配置扫描

在启动类中添加对mapper包扫描 @MapperScan

@SpringBootApplication
@MapperScan("com.xxx.xxx.xxx")

在这个示例中,我们创建了两个SqlSessionFactory:masterSqlSessionFactory和slaveSqlSessionFactory。我们还创建了一个动态数据源,它可以根据需要切换到不同的数据源。我们使用@Qualifier注释来指定每个数据源的名称。

方案1:手动编程配置对应的SessionFactory
    // 需要为每个数据源创建一个SqlSessionFactory。以下是一个示例:
    @Bean(name = "masterSqlSessionFactory")
    public SqlSessionFactory masterSqlSessionFactory(@Qualifier("masterDataSource") DataSource masterDataSource) throws Exception {
   
   
        SqlSessionFactoryBean bean = new SqlSessionFactoryBean();
        bean.setDataSource(masterDataSource);
        bean.setMapperLocations(new PathMatchingResourcePatternResolver().getResources("classpath*:mapper/master/*.xml"));
        return bean.getObject();
    }

    // 需要为每个数据源创建一个SqlSessionFactory。以下是一个示例:
    @Bean(name = "slaveSqlSessionFactory")
    public SqlSessionFactory slaveSqlSessionFactory(@Qualifier("slaveDataSource") DataSource slaveDataSource) throws Exception {
   
   
        SqlSessionFactoryBean bean = new SqlSessionFactoryBean();
        bean.setDataSource(slaveDataSource);
        bean.setMapperLocations(new PathMatchingResourcePatternResolver().getResources("classpath*:mapper/slave/*.xml"));
        return bean.getObject();
    }

    @Bean(name = "sqlSessionTemplate")
    public SqlSessionTemplate sqlSessionTemplate(@Qualifier("dynamicDataSource") DataSource dynamicDataSource) throws Exception {
   
   
        return new SqlSessionTemplate(dynamicDataSource);
    }

添加了上面的配置注解之后,会进行扫描所有的Mybatis的Mapper接口类,进行注入到对应的Spring的上下文中。此外还有另外一种方式就只通过@MapperScan的sqlSessionFactoryRef方式指定对应的SessionFactory并且定义扫描方式。

方案2:注解编程配置对应的SessionFactory

接下来需要配置两个mybatis的SqlSessionFactory分别使用不同的数据源:

@Configuration
@MapperScan(basePackages = {
   
   "com.xxxx.mapper"}, sqlSessionFactoryRef = "masterSqlSessionFactory")
    public class MasterSqlSessionFactoryConfiguration {
   
   
        @Autowired
        @Qualifier("masterDataSource")
        private DataSource masterDataSource;
        @Bean
        public SqlSessionFactory sqlSessionFactory1() throws Exception {
   
   
               SqlSessionFactoryBean factoryBean = new SqlSessionFactoryBean();
            factoryBean.setDataSource(masterDataSource); 
            return factoryBean.getObject();
       }
       @Bean
       public SqlSessionTemplate sqlSessionTemplate1() throws Exception {
   
   
           SqlSessionTemplate template = new SqlSessionTemplate(sqlSessionFactory1()); 
          // 使用上面配置的Factory
          return template;
      }
 }

经过上面的配置后,com.xxxx.mapper下的Mapper接口,都会使用master数据源。同理可配第二个SqlSessionFactory:

@Configuration
@MapperScan(basePackages = {
   
   "com.xxxx.dao"}, sqlSessionFactoryRef = "slaveSqlSessionFactory")
    public class SlaveSqlSessionFactoryConfiguration {
   
   
        @Autowired
        @Qualifier("slaveDataSource")
        private DataSource slaveDataSource;
        @Bean
        public SqlSessionFactory sqlSessionFactory2() throws Exception {
   
   
               SqlSessionFactoryBean factoryBean = new SqlSessionFactoryBean();
            factoryBean.setDataSource(slaveDataSource); 
            return factoryBean.getObject();
       }
       @Bean
       public SqlSessionTemplate sqlSessionTemplate1() throws Exception {
   
   
           SqlSessionTemplate template = new SqlSessionTemplate(sqlSessionFactory2()); 
          // 使用上面配置的Factory
          return template;
      }
 }

完成这些配置后,假设有2个Mapper:com.xxxx.mapper.XXXMapper和com.xxxx.dao.Mapper,使用前者时会自动连接master库,后者连接slave库。

创建静态数据源

接下来,我们要针对于多数据源和及动态数据源进行实现对应的落地方案,希望可以帮助到大家,动态数据源: 通过AOP在不同数据源之间动态切换。

    /**
     * @return
     */
    @Bean(name = "dynamicDataSource")
    public DataSource dataSource() {
   
   
        DynamicDataSource dynamicDataSource = new DynamicDataSource();
        // 默认数据源
        dynamicDataSource.setDefaultTargetDataSource(dataSource1());
        // 配置多数据源
        Map<Object, Object> dsMap = new HashMap(5);
        dsMap.put("masterDataSource", dataSource1());
        dsMap.put("slaveDataSource", dataSource2());
        dynamicDataSource.setTargetDataSources(dsMap);
        return dynamicDataSource;
    }

动态数据源实现处理

使用动态数据源的初衷,是能在应用层做到读写分离,即在程序代码中控制不同的查询方法去连接不同的库。除了这种方法以外,数据库中间件也是个不错的选择,它的优点是数据库集群对应用来说只暴露为单库,不需要切换数据源的代码逻辑。

定义数据源切换上下文

首先定义一个ContextHolder, 用于保存当前线程使用的数据源名:

public class DataSourceContextHolder {
   
   
    /**
     * 默认数据源
     */
    public static final String DEFAULT_DS = "masterDataSource";
    private static final ThreadLocal<String> contextHolder = new ThreadLocal<>();
    // 设置数据源名
    public static void setDB(String dbType) {
   
   
        contextHolder.set(dbType);
    }

    // 获取数据源名
    public static String getDB() {
   
   
        return (contextHolder.get());
    }

    // 清除数据源名
    public static void clearDB() {
   
   
        contextHolder.remove();
    }
}
定义动态切换数据源

我们需要创建一个动态数据源来管理多个数据源,自定义一个javax.sql.DataSource接口的实现,这里只需要继承Spring为我们预先实现好的父类AbstractRoutingDataSource即可。

public class DynamicDataSource extends AbstractRoutingDataSource {
   
   
    @Override
    protected Object determineCurrentLookupKey() {
   
   
        return DataSourceContextHolder.getDB();
    }
}

在这个示例中,我们使用DataSourceContextHolder来获取当前线程的数据源类型。DataSourceContextHolder是一个自定义的类,它使用ThreadLocal来存储当前线程的数据源类型。

AOP的方式实现数据源动态切换

通过自定义注解@DS用于在编码时指定方法使用哪个数据源。

@Retention(RetentionPolicy.RUNTIME)
@Target({
   
    ElementType.METHOD })
public @interface DS {
   
   
    String value() default "masterDataSource";
}
AOP切面实现运行切换机制

编写AOP切面,实现切换数据源逻辑,我们需要在运行时切换数据源。

@Aspect
@Component
public class DynamicDataSourceAspect {
   
   
    @Before("@annotation(DS)")
    public void beforeSwitchDS(JoinPoint point){
   
   
        //获得当前访问的class
        Class<?> className = point.getTarget().getClass();
        //获得访问的方法名
        String methodName = point.getSignature().getName();
        //得到方法的参数的类型
        Class[] argClass = ((MethodSignature)point.getSignature()).getParameterTypes();
        String dataSource = DataSourceContextHolder.DEFAULT_DS;
        try {
   
   
            // 得到访问的方法对象
            Method method = className.getMethod(methodName, argClass);
            // 判断是否存在@DS注解
            if (method.isAnnotationPresent(DS.class)) {
   
   
                DS annotation = method.getAnnotation(DS.class);
                // 取出注解中的数据源名
                dataSource = annotation.value();
            }
        } catch (Exception e) {
   
   
            e.printStackTrace();
        }
        // 切换数据源
        DataSourceContextHolder.setDB(dataSource);
    }
    @After("@annotation(DS)")
    public void afterSwitchDS(JoinPoint point){
   
   
        DataSourceContextHolder.clearDB();
    }
}

完成上述配置后,在先前SqlSessionFactory配置中指定使用DynamicDataSource就可以在Service中愉快的切换数据源了。

@Autowired
    private CXXMapper userAMapper;
    @DS("masterDataSource")
    public String ds1() {
   
   
        return userAMapper.selectByPrimaryKey(1).getName();
    }
    @DS("slaveDataSource")
    public String ds2() {
   
   
        return userAMapper.selectByPrimaryKey(1).getName();
    }
手动编程实现运行切换机制

我们使用DataSourceContextHolder来设置当前线程的数据源类型。在getAllUsers方法中,我们使用主数据源。在getUserById方法中,我们使用从数据源。

@Service
public class UserServiceImpl implements UserService {
   
   

    @Autowired
    private UserMapper userMapper;

    @Override
    public List<User> getAllUsers() {
   
   
        DataSourceContextHolder.setDataSourceType(DataSourceType.MASTER);
        return userMapper.getAllUsers();
    }

    @Override
    public User getUserById(int id) {
   
   
        DataSourceContextHolder.setDataSourceType(DataSourceType.SLAVE);
        return userMapper.getUserById(id);
    }
}

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
8月前
|
前端开发 Java 应用服务中间件
《深入理解Spring》 Spring Boot——约定优于配置的革命者
Spring Boot基于“约定优于配置”理念,通过自动配置、起步依赖、嵌入式容器和Actuator四大特性,简化Spring应用的开发与部署,提升效率,降低门槛,成为现代Java开发的事实标准。
|
8月前
|
前端开发 Java 微服务
《深入理解Spring》:Spring、Spring MVC与Spring Boot的深度解析
Spring Framework是Java生态的基石,提供IoC、AOP等核心功能;Spring MVC基于其构建,实现Web层MVC架构;Spring Boot则通过自动配置和内嵌服务器,极大简化了开发与部署。三者层层演进,Spring Boot并非替代,而是对前者的高效封装与增强,适用于微服务与快速开发,而深入理解Spring Framework有助于更好驾驭整体技术栈。
|
8月前
|
XML Java 应用服务中间件
【SpringBoot(一)】Spring的认知、容器功能讲解与自动装配原理的入门,带你熟悉Springboot中基本的注解使用
SpringBoot专栏开篇第一章,讲述认识SpringBoot、Bean容器功能的讲解、自动装配原理的入门,还有其他常用的Springboot注解!如果想要了解SpringBoot,那么就进来看看吧!
738 2
|
9月前
|
安全 Java Ruby
我尝试了所有后端框架 — — 这就是为什么只有 Spring Boot 幸存下来
作者回顾后端开发历程,指出多数框架在生产环境中难堪重负。相比之下,Spring Boot凭借内置安全、稳定扩展、完善生态和企业级支持,成为构建高可用系统的首选,真正经受住了时间与规模的考验。
664 2
|
9月前
|
人工智能 Java 机器人
基于Spring AI Alibaba + Spring Boot + Ollama搭建本地AI对话机器人API
Spring AI Alibaba集成Ollama,基于Java构建本地大模型应用,支持流式对话、knife4j接口可视化,实现高隐私、免API密钥的离线AI服务。
7028 2
基于Spring AI Alibaba + Spring Boot + Ollama搭建本地AI对话机器人API
存储 JSON Java
927 0
|
Java 数据库连接 Spring
面试题:springboot的自定义配置有哪些
面试题:springboot的自定义配置有哪些
237 0
springboot WebMvcConfigurer详解自定义配置请求静态资源
springboot WebMvcConfigurer详解自定义配置请求静态资源
716 0
|
Java 数据库连接 Maven
SpringBoot【付诸实践 01】SpringBoot自定义starter保姆级教程(说明+源码+配置+测试)
SpringBoot【付诸实践 01】SpringBoot自定义starter保姆级教程(说明+源码+配置+测试)
314 1
|
Java
springboot中自定义配置
springboot中自定义配置
146 0