mybatis连接多源数据库

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
云数据库 RDS MySQL,高可用系列 2核4GB
简介: mybatis连接多源数据库

公众号merlinsea


  • 背景
  • 在工作中,偶尔会遇到需要配置多源数据库的场景,通常的建议是一个微服务配置一个数据库的源,这样这个默认的数据源就是主数据源。但如果有时候需要在一个微服务中连接多个数据源,可以做如下的配置实现。
  • 这里我们以两个数据源为例介绍如何进行连接
  • pom文件中引入不同数据源依赖
  • 对于第三方的数据源,数据库的设计厂商会提供连接数据库的驱动jar包,只需要我们手动将厂商提供的jar包通过mvn install:install-file命令将其打包到本地仓库中即可。


<!--手动将厂商提供的jar打包进本地仓库后引入-->
        <dependency>
            <groupId>NQjc.jar</groupId>
            <artifactId>netsuite</artifactId>
            <version>1.0</version>
        </dependency>
        <dependency>
            <groupId>mysql</groupId>
            <artifactId>mysql-connector-java</artifactId>
            <scope>runtime</scope>
        </dependency>


  • application.yml文件配置

server:
  port: 7000
spring:
  application:
    name: financial-bi-service
  datasource:
    type: com.alibaba.druid.pool.DruidDataSource
    druid:
      # 初始连接数
      initialSize: 5
      # 最小连接池数量
      minIdle: 10
      # 最大连接池数量
      maxActive: 20
      # 配置获取连接等待超时的时间
      maxWait: 60000
      # 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒
      timeBetweenEvictionRunsMillis: 60000
      # 配置一个连接在池中最小生存的时间,单位是毫秒
      minEvictableIdleTimeMillis: 300000
      # 配置一个连接在池中最大生存的时间,单位是毫秒
      maxEvictableIdleTimeMillis: 900000
      #ns数据库
      ns:
        #  厂商提供jar包中的连接数据库的驱动类
        driver-class-name: com.netsuite.jdbc.openaccess.OpenAccessDriver
        # 厂商提供的数据库地址url
        jdbc-url: jdbc:ns://5810519.connect.api.netsuite.com:1708;ServerDataSource=NetSuite.com;encrypted=1;NegotiateSSLClose=false
        username: usernamexxxyyy
        password: passwordxxyy
      #微服务数据库
      master:
        driver-class-name: com.mysql.cj.jdbc.Driver
        username: root
        password: password123
        jdbc-url: jdbc:mysql://172.10.10.119:3306/dbname?serverTimezone=GMT%2B8&useUnicode=true&characterEncoding=utf8
# 控制台输出sql、下划线转驼峰
mybatis:
  configuration:
    log-impl: org.apache.ibatis.logging.stdout.StdOutImpl
    map-underscore-to-camel-case: true


  • 在config包下完成两个数据源配置类的创建并交由spring进行管理【核心】
  • 注意:在配置的过程中必须有一个配置类叫MasterDataSourceConfig,因为在spring启动的时候会自动加载这个Master的配置类

/**
 * 配置mysql的数据源
 */
@Configuration
@MapperScan(basePackages = MasterDataSourceConfig.PACKAGE, sqlSessionFactoryRef = "masterSqlSessionFactory")
public class MasterDataSourceConfig {
    // mysql数据源的mapper接口的路径
    static final String PACKAGE = "com.company.dao.master";
    // mysql数据源的mapper.xml文件路径
    static final String MAPPER_LOCATION = "classpath:mapping/master/*.xml";
    //从配置文件的指定标签中读取数据源信息并创建DataSource
    @Bean(name = "masterDataSource")
    @ConfigurationProperties(prefix = "spring.datasource.druid.master")
    @Primary //声明是主数据源
    public DataSource masterDataSource() {
        return DataSourceBuilder.create().build();
    }
    //数据源事务设置
    @Bean(name = "masterTransactionManager")
    @Primary
    public DataSourceTransactionManager masterTransactionManager() {
        return new DataSourceTransactionManager(masterDataSource());
    }
    //根据DataSource和mapper映射文件路径创建SqlSessionFactory
    @Bean(name = "masterSqlSessionFactory")
    @Primary
    public SqlSessionFactory masterSqlSessionFactory(@Qualifier("masterDataSource") DataSource masterDataSource)
            throws Exception {
        final SqlSessionFactoryBean sessionFactory = new SqlSessionFactoryBean();
        sessionFactory.setDataSource(masterDataSource);
        sessionFactory.setMapperLocations(new PathMatchingResourcePatternResolver()
                .getResources(MasterDataSourceConfig.MAPPER_LOCATION));
        return sessionFactory.getObject();
    }
}


  • 配置第二个数据源 【其他数据源的名字可以取别的名称】  

/**
 * 配置ns的数据源
 */
@Configuration
@MapperScan(basePackages = NsDataSourceConfig.PACKAGE, sqlSessionFactoryRef = "nsSqlSessionFactory")
public class NsDataSourceConfig {
   // ns数据源的mapper接口的路径
    static final String PACKAGE = "com.company.dao.ns";
    // ns数据源的mapper.xml文件的类路径
    static final String MAPPER_LOCATION = "classpath:mapping/ns/*.xml";
    //从配置文件读取数据源信息并创建DataSource
    @Bean(name = "nsDataSource")
    @ConfigurationProperties(prefix = "spring.datasource.druid.ns")
    public DataSource nsDataSource() {
        return DataSourceBuilder.create().build();
    }
    //数据源事务设置
    @Bean(name = "nsTransactionManager")
    public DataSourceTransactionManager nsTransactionManager() {
        return new DataSourceTransactionManager(nsDataSource());
    }
    //根据DataSource和mapper映射文件路径创建SqlSessionFactory
    @Bean(name = "nsSqlSessionFactory")
    public SqlSessionFactory nsSqlSessionFactory(@Qualifier("nsDataSource") DataSource nsDataSource)
            throws Exception {
        final SqlSessionFactoryBean sessionFactory = new SqlSessionFactoryBean();
        sessionFactory.setDataSource(nsDataSource);
        sessionFactory.setMapperLocations(new PathMatchingResourcePatternResolver()
                .getResources(NsDataSourceConfig.MAPPER_LOCATION));
        return sessionFactory.getObject();
    }
}


  • 对不同的数据源分别建立dao/master的mapper接口的文件夹和dao/ns的mapper接口文件夹

@Repository
public interface MasterDetailReportMapper {
    /**
     * 将明细报告批量插入数据库
     * @param reportList
     * @return
     */
    int insertBatch(@Param("reportList") List<MasterDetailReportDO> reportList);
    int insert(@Param("report") MasterDetailReportDO report);
    /**
     * 根据transctionid和lineid查询明细 报表
     * @param transactionId
     * @param lineId
     * @return
     */
    MasterDetailReportDO getMasterDetailReportByTranIdAndLineId(@Param("transactionId") long transactionId,@Param("lineId") int lineId);
    /**
     * 将report插入到历史记录表
     * @param report
     * @return
     */
    int insertHistory(@Param("report") MasterDetailReportDO report);
    /**
     * 根据transctionid和lineid删除明细 报表
     * @param transactionId
     * @param lineId
     * @return
     */
    int deleteMasterDetailReportByTranIdAndLineId(@Param("transactionId") long transactionId,@Param("lineId") int lineId);
}


@Repository
public interface NetsuiteMapper {
    /**
     * 根据输入的date查询ns上的 accountingperiod
     * @param date
     * @return
     */
    NSAccountingPeriodsDO getAccountingPeriodIdByDate(@Param("date") Date date);
}


  • 在类路径下分别建立对应的mapper.xml文件
  • classpath:mapping/master 文件夹下的xml文件如下:

<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE mapper
        PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN"
        "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.company.dao.master.MasterDetailReportMapper">
    <resultMap id="detailReportMap" type="com.shokz.domain.MasterDetailReportDO">
        <id column="id" property="id"/>
        <result column="transaction_id" property="transactionId"/>
        <result column="transaction_type" property="transactionType"/>
        <result column="trandate" property="trandate"/>
        <result column="tranid" property="tranid"/>
        <result column="sunlike_id" property="sunlikeId"/>
        <result column="currency" property="curName"/>
        <result column="subsidy" property="subName"/>
        <result column="transaction_line_id" property="lineId"/>
        <result column="class_name" property="className"/>
        <result column="account_id" property="accountId"/>
        <result column="subject" property="subject"/>
        <result column="subject_type" property="subjectType"/>
        <result column="amount" property="amount"/>
        <result column="foreign_amount" property="foreignAmount"/>
        <result column="entity_id" property="entityId"/>
        <result column="entity_name" property="entityName"/>
        <result column="trans_memo" property="transMemo"/>
        <result column="lines_memo" property="linesMemo"/>
        <result column="xm_name" property="xmName"/>
        <result column="hang_memo" property="hangMemo"/>
        <result column="xgf_name" property="xgfName"/>
        <result column="created_time" property="createdTime"/>
        <result column="updated_time" property="updatedTime"/>
        <result column="status" property="status"/>
        <result column="msg" property="msg"/>
    </resultMap>
    <!--sql片段-->
    <sql id="detailReportField">
        id,
        transaction_id,
        transaction_type,
        trandate,
        tranid,
        sunlike_id,
        currency,subsidy,transaction_line_id,class_name,account_id,subject,subject_type,amount,foreign_amount,entity_id,entity_name,
        trans_memo,lines_memo,xm_name,hang_memo,xgf_name,created_time,updated_time,status,msg
    </sql>
    <insert id="insertBatch" parameterType="java.util.List" useGeneratedKeys="true" keyProperty="id">
        INSERT INTO ods_expense_detail_report(`transaction_id`,`transaction_type`,`trandate`,`tranid`,`sunlike_id`,`currency`,`subsidy`,`transaction_line_id`,`class_name`,`account_id`,`subject`,`subject_type`,`amount`,`foreign_amount`,`entity_id`,`entity_name`,`trans_memo`,`lines_memo`,`xm_name`,`hang_memo`,`xgf_name`,`created_time`,`updated_time`,`status`,`msg`)
        VALUES
        <foreach collection ="reportList" item="report" separator =",">
            ( #{report.transactionId}, #{report.transactionType},#{report.trandate}, #{report.tranid},#{report.sunlikeId}, #{report.curName},#{report.subName}, #{report.lineId},#{report.className}, #{report.accountId},#{report.subject}, #{report.subjectType},#{report.amount}, #{report.foreignAmount},#{report.entityId}, #{report.entityName},#{report.transMemo}, #{report.linesMemo},#{report.xmName}, #{report.hangMemo},#{report.xgfName}, #{report.createdTime},#{report.updatedTime}, #{report.status},#{report.msg})
        </foreach >
    </insert>
    <insert id="insert" parameterType="com.shokz.domain.MasterDetailReportDO" useGeneratedKeys="true" keyProperty="id" keyColumn="id" >
        INSERT INTO ods_expense_detail_report(`transaction_id`,`transaction_type`,`trandate`,`tranid`,`sunlike_id`,`currency`,`subsidy`,`transaction_line_id`,`class_name`,`account_id`,`subject`,`subject_type`,`amount`,`foreign_amount`,`entity_id`,`entity_name`,`trans_memo`,`lines_memo`,`xm_name`,`hang_memo`,`xgf_name`,`created_time`,`updated_time`,`status`,`msg`)
        VALUES( #{report.transactionId}, #{report.transactionType},#{report.trandate}, #{report.tranid},#{report.sunlikeId}, #{report.curName},#{report.subName}, #{report.lineId},#{report.className}, #{report.accountId},#{report.subject}, #{report.subjectType},#{report.amount}, #{report.foreignAmount},#{report.entityId}, #{report.entityName},#{report.transMemo}, #{report.linesMemo},#{report.xmName}, #{report.hangMemo},#{report.xgfName}, #{report.createdTime},#{report.updatedTime}, #{report.status},#{report.msg});
    </insert>
    <insert id="insertHistory" parameterType="com.shokz.domain.MasterDetailReportDO" useGeneratedKeys="true" keyProperty="id" keyColumn="id" >
        INSERT INTO history_detail_report(`transaction_id`,`transaction_type`,`trandate`,`tranid`,`sunlike_id`,`currency`,`subsidy`,`transaction_line_id`,`class_name`,`account_id`,`subject`,`subject_type`,`amount`,`foreign_amount`,`entity_id`,`entity_name`,`trans_memo`,`lines_memo`,`xm_name`,`hang_memo`,`xgf_name`,`created_time`,`updated_time`,`status`,`msg`)
        VALUES( #{report.transactionId}, #{report.transactionType},#{report.trandate}, #{report.tranid},#{report.sunlikeId}, #{report.curName},#{report.subName}, #{report.lineId},#{report.className}, #{report.accountId},#{report.subject}, #{report.subjectType},#{report.amount}, #{report.foreignAmount},#{report.entityId}, #{report.entityName},#{report.transMemo}, #{report.linesMemo},#{report.xmName}, #{report.hangMemo},#{report.xgfName}, #{report.createdTime},#{report.updatedTime}, #{report.status},#{report.msg});
    </insert>
    <select id="getMasterDetailReportByTranIdAndLineId" resultMap="detailReportMap">
        select <include refid="detailReportField"/> from ods_expense_detail_report where transaction_id = #{transactionId} and transaction_line_id = #{lineId}
    </select>
    <delete id="deleteMasterDetailReportByTranIdAndLineId">
        delete from ods_expense_detail_report where transaction_id = #{transactionId} and transaction_line_id = #{lineId}
    </delete>
</mapper>
  • classpath:mapping/ns 文件夹下的mapper.xml文件如下

<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE mapper
        PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN"
        "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.company.dao.ns.NetsuiteMapper">
    <resultMap id="AccountingPeriods" type="com.shokz.domain.NSAccountingPeriodsDO">
        <result column="period_id" property="accountingPeriodID"/>
        <result column="CLOSED" property="closed"/>
        <result column="CLOSED_ACCOUNTS_PAYABLE" property="closedAccountsPayable"/>
        <result column="CLOSED_ACCOUNTS_RECEIVABLE" property="closedAccountsReceivable"/>
        <result column="CLOSED_ALL" property="closedAll"/>
        <result column="CLOSED_ON" property="closedOn"/>
        <result column="CLOSED_PAYROLL" property="closedPayroll"/>
        <result column="DATE_LAST_MODIFIED" property="dateLastModified"/>
        <result column="ENDING" property="ending"/>
        <result column="FISCAL_CALENDAR_ID" property="fiscalCalendarID"/>
        <result column="FULL_NAME" property="fullName"/>
        <result column="ISINACTIVE" property="isInactive"/>
        <result column="IS_ADJUSTMENT" property="isAdjustment"/>
        <result column="LOCKED_ACCOUNTS_PAYABLE" property="lockedAccountsPayable"/>
        <result column="LOCKED_ACCOUNTS_RECEIVABLE" property="lockedAccountsReceivable"/>
        <result column="LOCKED_ALL" property="lockedAll"/>
        <result column="LOCKED_PAYROLL" property="lockedPayroll"/>
        <result column="NAME" property="name"/>
        <result column="PARENT_ID" property="parentID"/>
        <result column="QUARTER" property="quarter"/>
        <result column="STARTING" property="starting"/>
        <result column="YEAR_0" property="year"/>
        <result column="YEAR_ID" property="yearID"/>
    </resultMap>
    <!--sql片段-->
    <sql id="findById_field">
        ACCOUNTING_PERIOD_ID period_id,CLOSED,CLOSED_ACCOUNTS_PAYABLE,CLOSED_ACCOUNTS_RECEIVABLE,CLOSED_ALL,CLOSED_ON,CLOSED_PAYROLL,DATE_LAST_MODIFIED,ENDING,
        FISCAL_CALENDAR_ID,FULL_NAME,ISINACTIVE,IS_ADJUSTMENT,LOCKED_ACCOUNTS_PAYABLE,LOCKED_ACCOUNTS_RECEIVABLE,LOCKED_ALL,LOCKED_PAYROLL,NAME,
        PARENT_ID,QUARTER,STARTING,YEAR_0,YEAR_ID
    </sql>
    <select id="getAccountingPeriodIdByDate" resultMap="AccountingPeriods">
        select  <include refid="findById_field"/> from ACCOUNTING_PERIODS where STARTING = #{date} and QUARTER='No' and YEAR_0='No'
    </select>
</mapper>

640.png

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
21天前
|
关系型数据库 MySQL 数据库连接
python脚本:连接数据库,检查直播流是否可用
【10月更文挑战第13天】本脚本使用 `mysql-connector-python` 连接MySQL数据库,检查 `live_streams` 表中每个直播流URL的可用性。通过 `requests` 库发送HTTP请求,输出每个URL的检查结果。需安装 `mysql-connector-python` 和 `requests` 库,并配置数据库连接参数。
120 68
|
13天前
|
SQL Java 数据库连接
深入 MyBatis-Plus 插件:解锁高级数据库功能
Mybatis-Plus 提供了丰富的插件机制,这些插件可以帮助开发者更方便地扩展 Mybatis 的功能,提升开发效率、优化性能和实现一些常用的功能。
90 26
深入 MyBatis-Plus 插件:解锁高级数据库功能
|
18天前
|
SQL 安全 Java
MyBatis-Plus条件构造器:构建安全、高效的数据库查询
MyBatis-Plus 提供了一套强大的条件构造器(Wrapper),用于构建复杂的数据库查询条件。Wrapper 类允许开发者以链式调用的方式构造查询条件,无需编写繁琐的 SQL 语句,从而提高开发效率并减少 SQL 注入的风险。
13 1
MyBatis-Plus条件构造器:构建安全、高效的数据库查询
|
16天前
|
SQL Java 数据库连接
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率。本文介绍了连接池的工作原理、优势及实现方法,并提供了HikariCP的示例代码。
31 3
|
23天前
|
关系型数据库 MySQL 数据库连接
DBeaver如何连接一个数据库
【10月更文挑战第27天】DBeaver 是一款功能强大的通用数据库管理工具,支持多种主流数据库。本文介绍了使用 DBeaver 连接数据库的基本步骤,包括下载安装、创建新连接、选择数据库类型、配置连接参数、测试连接以及最终连接到数据库。详细的操作指南帮助用户轻松管理和操作数据库。
118 9
|
16天前
|
Java 数据库连接 数据库
深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能
在Java应用开发中,数据库操作常成为性能瓶颈。本文通过问题解答形式,深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能。文章介绍了连接池的优势、选择和使用方法,以及优化配置的技巧。
16 1
|
16天前
|
Java 数据库连接 数据库
Java连接池在数据库性能优化中的重要作用。连接池通过预先创建和管理数据库连接,避免了频繁创建和关闭连接的开销
本文深入探讨了Java连接池在数据库性能优化中的重要作用。连接池通过预先创建和管理数据库连接,避免了频繁创建和关闭连接的开销,显著提升了系统的响应速度和吞吐量。文章介绍了连接池的工作原理,并以HikariCP为例,展示了如何在Java应用中使用连接池。通过合理配置和优化,连接池技术能够有效提升应用性能。
32 1
|
25天前
|
SQL JavaScript 关系型数据库
node博客小项目:接口开发、连接mysql数据库
【10月更文挑战第14天】node博客小项目:接口开发、连接mysql数据库
|
1月前
|
Java 关系型数据库 MySQL
springboot学习五:springboot整合Mybatis 连接 mysql数据库
这篇文章是关于如何使用Spring Boot整合MyBatis来连接MySQL数据库,并进行基本的增删改查操作的教程。
66 0
springboot学习五:springboot整合Mybatis 连接 mysql数据库
|
19天前
|
SQL 关系型数据库 数据库连接
"Nacos 2.1.0版本数据库配置写入难题破解攻略:一步步教你排查连接、权限和配置问题,重启服务轻松解决!"
【10月更文挑战第23天】在使用Nacos 2.1.0版本时,可能会遇到无法将配置信息写入数据库的问题。本文将引导你逐步解决这一问题,包括检查数据库连接、用户权限、Nacos配置文件,并提供示例代码和详细步骤。通过这些方法,你可以有效解决配置写入失败的问题。
44 0