Springboot+mybatis-plus+dynamic-datasource+Druid 多数据源 分布式事务

Springboot+mybatis-plus+dynamic-datasource+Druid 多数据源事务,分布式事务

0.前言

背景
处理多数据源事务一直是一个复杂而棘手的问题,通常我们有两种主流的解决方法。

第一种是通过Atomikos手动创建多数据源事务,这种方法更适合数据源数量较少,参数配置不复杂,对性能要求不高的项目。然而,这种方法的最大困难在于需要手动配置大量设置,这可能会消耗大量时间。


第二种是通过使用Seata等分布式事务解决方案。这种方法的难点在于需要建立并维护像Seata-server这样的统一管理中心。

今天我们使用Springboot+mybatis-plus+dynamic-datasource+Druid 多数据源 实现分布式事务和本地多数据源事务。
每种解决方案都有其适用的场景,然而在实际操作中,我经常接到如下的问题:
“我为什么在添加了事务注解之后,数据源切换还是失败了?”
“我了解到这涉及到分布式事务,但我并不想使用Seata。我的场景比较简单,有没有不需要依赖第三方的解决方案?”
这些问题突显出在现实工作中,我们可能需要更灵活、更简便的解决方案来处理多数据源事务问题。
在这里插入图片描述
在这里插入图片描述

1. 基础介绍

自从3.3.0开始,由seata的核心贡献者https://github.com/a364176773 贡献了基于connection代理的方案。
完整代码 https://github.com/baomidou/dynamic-datasource-spring-boot-starter/commit/f0cbad193528296eeb64faa76c79743afbdd811d
建议从3.4.0版本开始使用,其修复了一个功能,老版本不加@DS只加@DSTransactional会报错。
在这里插入图片描述
核心的几处代码

    @Role(value = BeanDefinition.ROLE_INFRASTRUCTURE)
    @ConditionalOnProperty(prefix = DynamicDataSourceProperties.PREFIX, name = "seata", havingValue = "false",
        matchIfMissing = true)
    @Bean
    public Advisor localTransactionAdvisor() {
        AspectJExpressionPointcut pointcut = new AspectJExpressionPointcut();
        pointcut.setExpression("@annotation(com.baomidou.dynamic.datasource.annotation.DSTransactional)");
        return new DefaultPointcutAdvisor(pointcut, new DynamicTransactionAdvisor());
    }
 

我们可以看到通过spring.datasource.dynamic.seata=true配置来启用条件注解。这个是dynamic-datasource支持seata事务的开发和入口。

ConnectionFactory

ConnectionFactory 是一个工厂类,主要的作用是管理数据库连接,并提供获取和存储数据库连接的功能。

  1. 存储每个线程独立的数据库连接:ConnectionFactory 使用 ThreadLocal 为每个线程提供其自己的数据库连接池,这样可以防止在多线程环境中数据库连接的混乱。

  2. 提供获取数据库连接的方法:ConnectionFactory 提供 getConnection 方法,使得在同一个线程中的多个模块可以共享同一个数据库连接。

  3. 提供存储数据库连接的方法:ConnectionFactory 提供 putConnection 方法,可以存储新的数据库连接到当前线程的数据库连接池中。

  4. 提供通知数据库连接的方法:ConnectionFactory 提供 notify 方法,可以对当前线程的所有数据库连接进行统一的操作,比如提交或者回滚事务。

通过这些功能,ConnectionFactory 实现了数据库连接的有效管理,保证了在同一线程中对多个数据库进行操作时,可以共享同一连接,实现事务管理。核心代码如下。大家可以借鉴

package com.baomidou.dynamic.datasource.tx;

import java.sql.SQLException;
import java.util.Map;
import java.util.concurrent.ConcurrentHashMap;

/**
 * @author funkye
 */
public class ConnectionFactory {

    // 使用ThreadLocal来保存与当前线程相关的数据库连接信息,以Map形式存储,Map中的key为数据源名称,value为对应的数据库连接代理类
    private static final ThreadLocal<Map<String, ConnectionProxy>> CONNECTION_HOLDER =
            new ThreadLocal<Map<String, ConnectionProxy>>() {
                @Override
                protected Map<String, ConnectionProxy> initialValue() {
                    return new ConcurrentHashMap<>(8);
                }
            };

    // 存储数据库连接到当前线程的连接池中,如果当前线程的连接池中没有该数据源的连接,则新建一个并放入
    public static void putConnection(String ds, ConnectionProxy connection) {
        Map<String, ConnectionProxy> concurrentHashMap = CONNECTION_HOLDER.get();
        if (!concurrentHashMap.containsKey(ds)) {
            try {
                connection.setAutoCommit(false);
            } catch (SQLException e) {
                e.printStackTrace();
            }
            concurrentHashMap.put(ds, connection);
        }
    }

    // 从当前线程的连接池中获取指定数据源的数据库连接
    public static ConnectionProxy getConnection(String ds) {
        return CONNECTION_HOLDER.get().get(ds);
    }

    // 对当前线程的所有数据库连接执行通知操作,根据参数state决定是提交还是回滚,如果在执行过程中发生错误,则在所有连接处理完后抛出
    public static void notify(Boolean state) throws Exception {
        Exception exception = null;
        try {
            Map<String, ConnectionProxy> concurrentHashMap = CONNECTION_HOLDER.get();
            for (ConnectionProxy connectionProxy : concurrentHashMap.values()) {
                try {
                    connectionProxy.notify(state);
                } catch (SQLException e) {
                    exception = e;
                }
            }
        } finally {
            CONNECTION_HOLDER.remove(); //清除当前线程的连接池
            if (exception != null) {
                throw exception;
            }
        }
    }

}

AbstractRoutingDataSource 动态路由数据源的抽象类

动态路由数据源的抽象类,用于根据不同的业务需要,动态地选择需要使用的数据源。关键的方法是getConnection()getConnection(String username, String password),这两个方法会根据当前是否存在全局事务来动态地选择获取原始的数据库连接还是数据库连接代理。

public abstract class AbstractRoutingDataSource extends AbstractDataSource {

    // 抽象方法,子类需要实现该方法以确定数据源
    protected abstract DataSource determineDataSource();

    // 抽象方法,子类需要实现该方法以确定默认的数据源名称
    protected abstract String getPrimary();

    // 获取数据库连接,根据事务上下文中是否有XID来判断是否需要获取代理连接
    @Override
    public Connection getConnection() throws SQLException {
        String xid = TransactionContext.getXID();
        if (StringUtils.isEmpty(xid)) {
            // 如果没有XID,说明当前不处于全局事务中,直接获取原始连接
            return determineDataSource().getConnection();
        } else {
            // 如果有XID,说明当前处于全局事务中,需要获取代理连接
            String ds = DynamicDataSourceContextHolder.peek();
            ds = StringUtils.isEmpty(ds) ? getPrimary() : ds;
            ConnectionProxy connection = ConnectionFactory.getConnection(ds);
            return connection == null ? getConnectionProxy(ds, determineDataSource().getConnection()) : connection;
        }
    }

    // 与上面的方法类似,只不过这个方法可以传入用户名和密码来获取数据库连接
    @Override
    public Connection getConnection(String username, String password) throws SQLException {
        String xid = TransactionContext.getXID();
        if (StringUtils.isEmpty(xid)) {
            return determineDataSource().getConnection(username, password);
        } else {
            String ds = DynamicDataSourceContextHolder.peek();
            ds = StringUtils.isEmpty(ds) ? getPrimary() : ds;
            ConnectionProxy connection = ConnectionFactory.getConnection(ds);
            return connection == null ? getConnectionProxy(ds, determineDataSource().getConnection(username, password))
                    : connection;
        }
    }

    // 创建数据库连接代理,并将代理连接放入连接工厂
    private Connection getConnectionProxy(String ds, Connection connection) {
        ConnectionProxy connectionProxy = new ConnectionProxy(connection, ds);
        ConnectionFactory.putConnection(ds, connectionProxy);
        return connectionProxy;
    }

    // 获取指定类型的代理对象
    @Override
    @SuppressWarnings("unchecked")
    public <T> T unwrap(Class<T> iface) throws SQLException {
        if (iface.isInstance(this)) {
            return (T) this;
        }
        return determineDataSource().unwrap(iface);
    }

    // 判断是否是指定类型的代理对象
    @Override
    public boolean isWrapperFor(Class<?> iface) throws SQLException {
        return (iface.isInstance(this) || determineDataSource().isWrapperFor(iface));
    }
}

DynamicLocalTransactionInterceptor 动态的本地事务拦截器

动态的本地事务拦截器。基本思想是在方法调用前后添加事务处理的逻辑。当这个拦截器被应用到某个方法时,那么在调用这个方法时,会首先检查当前是否已经存在事务,如果存在则直接调用原始方法。如果不存在,则会先开启一个新的事务,然后调用原始方法,方法结束后根据方法执行的结果来提交或回滚事务。入口在这,看一眼就懂了。
在这里插入图片描述

// 实现MethodInterceptor接口定义拦截器
public class DynamicLocalTransactionInterceptor implements MethodInterceptor {

    @Override
    // invoke方法会在原方法执行前后进行拦截
    public Object invoke(MethodInvocation methodInvocation) throws Throwable {
        // 如果当前上下文中已存在事务,则直接调用原方法,不进行拦截处理
        if (!StringUtils.isEmpty(TransactionContext.getXID())) {
            return methodInvocation.proceed();
        }
        // 定义一个状态标志,标记事务是否执行成功
        boolean state = true;
        Object o;
        // 开启一个新的事务
        LocalTxUtil.startTransaction();
        try {
            // 调用原始方法
            o = methodInvocation.proceed();
        } catch (Exception e) {
            // 如果原方法执行抛出异常,则标记事务执行失败
            state = false;
            throw e;
        } finally {
            // 根据事务执行状态,提交或回滚事务
            if (state) {
                LocalTxUtil.commit();
            } else {
                LocalTxUtil.rollback();
            }
        }
        // 返回原方法的执行结果
        return o;
    }
}

3. 使用步骤示例

官方示例:https://github.com/dynamic-datasource/dynamic-datasource-samples/tree/master/tx-samples/tx-local-sample

完整示例项目 数据库都已准备好,可以直接运行测试。http://localhost:8080/doc.html

示例项目A,B,C分别对应OrderService,ProductService,AccountService。分别是独立的数据库。

用户下单分别调用产品库扣库存,账户库扣余额。
如果库存不足,或用户余额不足都抛出RuntimeException,触发整体回滚。

@Slf4j
@Service
@AllArgsConstructor
public class OrderService {

    private final OrderMapper orderMapper;
    private final AccountService accountService;
    private final ProductService productService;
    
    //@DS("order") 这里不需要,因为order是默认库,如果开启事务的不是默认库则必须加
    @DSTransactional //注意这里开启事务
    public void placeOrder(PlaceOrderRequest request) {
        log.info("=============ORDER START=================");
        Long userId = request.getUserId();
        Long productId = request.getProductId();
        Integer amount = request.getAmount();
        log.info("收到下单请求,用户:{}, 商品:{},数量:{}", userId, productId, amount);

        log.info("当前 XID: {}", TransactionContext.getXID());

        Order order = Order.builder()
                .userId(userId)
                .productId(productId)
                .status(OrderStatus.INIT)
                .amount(amount)
                .build();

        orderMapper.insert(order);
        log.info("订单一阶段生成,等待扣库存付款中");
        // 扣减库存并计算总价
        Double totalPrice = productService.reduceStock(productId, amount);
        // 扣减余额
        accountService.reduceBalance(userId, totalPrice);

        order.setStatus(OrderStatus.SUCCESS);
        order.setTotalPrice(totalPrice);
        orderMapper.updateById(order);
        log.info("订单已成功下单");
        log.info("=============ORDER END=================");
    }
}
@Slf4j
@Service
@RequiredArgsConstructor
public class ProductService {

    private final ProductMapper productMapper;

    @DS("product")
    public Double reduceStock(Long productId, Integer amount) {
        log.info("=============PRODUCT START=================");
        log.info("当前 XID: {}", TransactionContext.getXID());

        // 检查库存
        Product product = productMapper.selectById(productId);
        Assert.notNull(product, "商品不存在");
        Integer stock = product.getStock();
        log.info("商品编号为 {} 的库存为{},订单商品数量为{}", productId, stock, amount);

        if (stock < amount) {
            log.warn("商品编号为{} 库存不足,当前库存:{}", productId, stock);
            throw new RuntimeException("库存不足");
        }
        log.info("开始扣减商品编号为 {} 库存,单价商品价格为{}", productId, product.getPrice());
        // 扣减库存
        int currentStock = stock - amount;
        product.setStock(currentStock);
        productMapper.updateById(product);
        double totalPrice = product.getPrice() * amount;
        log.info("扣减商品编号为 {} 库存成功,扣减后库存为{}, {} 件商品总价为 {} ", productId, currentStock, amount, totalPrice);
        log.info("=============PRODUCT END=================");
        return totalPrice;
    }
}
@Slf4j
@Service
@RequiredArgsConstructor
public class AccountService {

    private final AccountMapper accountMapper;

    @DS("account")
    public void reduceBalance(Long userId, Double price) {
        log.info("=============ACCOUNT START=================");
        log.info("当前 XID: {}", TransactionContext.getXID());

        Account account = accountMapper.selectById(userId);
        Assert.notNull(account, "用户不存在");
        Double balance = account.getBalance();
        log.info("下单用户{}余额为 {},商品总价为{}", userId, balance, price);

        if (balance < price) {
            log.warn("用户 {} 余额不足,当前余额:{}", userId, balance);
            throw new RuntimeException("余额不足");
        }
        log.info("开始扣减用户 {} 余额", userId);
        double currentBalance = account.getBalance() - price;
        account.setBalance(currentBalance);
        accountMapper.updateById(account);
        log.info("扣减用户 {} 余额成功,扣减后用户账户余额为{}", userId, currentBalance);
        log.info("=============ACCOUNT END=================");
    }
}

4. 官方源码分析

5. 参考资料

  1. dynamic-datasource GitHub 仓库 ↗:dynamic-datasource 的官方 GitHub 仓库,包含源代码、文档和示例等资源。
<think>好的,我现在需要帮助用户在Spring Boot项目中集成MyBatis-PlusDruid来实现多数据源配置。首先,我要理清楚用户的需求:他们想要在应用中使用这两个技术栈,并且能够切换和管理多个数据源。接下来,我需要回忆一下相关的知识,并结合提供的引用内容来构建答案。 首先,用户提到了MyBatis-PlusDruid,这两个都是常用的Java库。MyBatis-Plus是对MyBatis的增强,提供了很多便捷的功能,比如CRUD接口、条件构造器等。Druid是阿里巴巴开源的数据库连接池,提供了强大的监控和扩展功能。结合这两个工具,可以有效地管理数据库连接和操作。 接下来,用户需要多数据源的支持。多数据源的配置通常涉及多个数据源的实例化,以及在不同情况下切换使用不同的数据源。在Spring Boot中,默认的数据源是自动配置的,但多数据源需要手动配置,并且需要解决事务管理等问题。 根据引用[1]和[2],用户可能需要整合sharding-jdbc-spring-boot-starter、mybatis-plus-boot-starter和druid。不过用户的问题主要集中在多数据源的切换和管理,所以可能需要分步骤讲解如何配置多个数据源,每个数据源使用Druid作为连接池,并且通过MyBatis-Plus来操作数据库。 首先,我应该考虑添加依赖。用户的项目需要引入MyBatis-PlusDruid以及可能的动态数据源依赖,比如dynamic-datasource-spring-boot-starter,这个库可以帮助简化多数据源的配置。不过引用中没有提到这个,可能需要结合常见的做法。 然后,配置数据源信息。在application.yml中定义两个数据源,比如master和slave,分别配置它们的url、username、password等信息,并且指定使用Druid作为连接池类型。 接下来,创建数据源配置类。使用@Configuration和@Bean注解来创建两个不同的DataSource实例,并且为每个数据源配置Druid的相关属性,比如过滤器、监控统计等。同时,需要设置@Primary注解来指定主数据源。 然后,配置MyBatis-Plus。每个数据源对应的SqlSessionFactory和事务管理器需要分别配置,并且指定不同的Mapper包路径,以便区分不同数据源的DAO层。 在业务层,需要使用@DS注解(来自dynamic-datasource)来指定具体使用哪个数据源。这样在Service层的方法上添加注解即可切换数据源。 事务管理方面,需要注意每个数据源的事务管理器要正确配置,避免跨数据源事务的问题。通常,在多数据源环境下,分布式事务处理比较复杂,可能需要额外的事务管理器,但用户的问题可能暂时不需要涉及这个,可以建议在需要的时候使用JTA或其他解决方案。 最后,测试验证,确保两个数据源都能正常工作,并且能够根据注解切换。 现在,我需要检查是否有遗漏的步骤,比如是否需要在启动类上排除默认的数据源自动配置,避免冲突。另外,动态数据源的选择是否需要额外的配置,比如AOP切面或者自定义的注解处理器。 可能还需要考虑Druid监控界面的配置,让用户能够访问Druid提供的监控页面,查看数据源的状态和SQL执行情况。 总结下来,步骤应该是: 1. 添加相关依赖(MyBatis-PlusDruid、动态数据源starter) 2. 配置多数据源信息 3. 排除默认数据源,手动配置每个数据源的Bean 4. 配置MyBatis-Plus的SqlSessionFactory和Mapper扫描 5. 使用@DS注解切换数据源 6. 配置事务管理器 7. 启用Druid监控 8. 测试验证 同时,需要提醒用户注意事务管理和连接池配置的最佳实践,比如合理设置连接池参数,监控SQL性能等。 可能的问题包括依赖冲突、配置错误导致数据源无法正确注入,或者事务不生效。需要确保每一步配置正确,并且依赖版本兼容。 最后,生成相关问题,可能涉及性能优化、监控配置、事务管理深入等方向。</think>### 分步实现Spring Boot集成MyBatis-PlusDruid多数据源配置 #### 一、添加依赖 在`pom.xml`中引入以下依赖: ```xml <!-- MyBatis-Plus --> <dependency> <groupId>com.baomidou</groupId> <artifactId>mybatis-plus-boot-starter</artifactId> <version>3.5.2</version> </dependency> <!-- Druid连接池 --> <dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.2.16</version> </dependency> <!-- 动态数据源(支持多数据源切换) --> <dependency> <groupId>com.baomidou</groupId> <artifactId>dynamic-datasource-spring-boot-starter</artifactId> <version>3.5.1</version> </dependency> ``` #### 二、配置多数据源信息 在`application.yml`中定义数据源: ```yaml spring: datasource: dynamic: primary: master # 默认主数据源 strict: false # 允许非明确标注时使用主数据源 datasource: master: url: jdbc:mysql://localhost:3306/db1 username: root password: 123456 driver-class-name: com.mysql.cj.jdbc.Driver type: com.alibaba.druid.pool.DruidDataSource slave: url: jdbc:mysql://localhost:3306/db2 username: root password: 123456 driver-class-name: com.mysql.cj.jdbc.Driver type: com.alibaba.druid.pool.DruidDataSource # Druid监控配置 druid: stat-view-servlet: enabled: true url-pattern: /druid/* login-username: admin login-password: admin ``` #### 三、配置数据源与MyBatis-Plus 1. **主数据源配置类** ```java @Configuration @MapperScan(basePackages = "com.example.mapper.master", sqlSessionFactoryRef = "masterSqlSessionFactory") public class MasterDataSourceConfig { @Bean("master") @ConfigurationProperties(prefix = "spring.datasource.dynamic.datasource.master") public DataSource masterDataSource() { return DruidDataSourceBuilder.create().build(); } @Bean("masterSqlSessionFactory") public SqlSessionFactory masterSqlSessionFactory(@Qualifier("master") DataSource dataSource) throws Exception { MybatisSqlSessionFactoryBean factoryBean = new MybatisSqlSessionFactoryBean(); factoryBean.setDataSource(dataSource); return factoryBean.getObject(); } @Bean("masterTransactionManager") public PlatformTransactionManager masterTransactionManager(@Qualifier("master") DataSource dataSource) { return new DataSourceTransactionManager(dataSource); } } ``` 2. **从数据源配置类**(结构与主数据源类似,替换包路径和Bean名称) #### 四、使用@DS注解切换数据源 在Service层方法上标注`@DS("slave")`: ```java @Service public class UserService { @Autowired private UserMapper userMapper; @DS("master") // 默认使用主数据源 public void addUser(User user) { userMapper.insert(user); } @DS("slave") // 切换至从数据源 public User getUserById(Long id) { return userMapper.selectById(id); } } ``` #### 五、启用Druid监控 访问`http://localhost:8080/druid`输入配置的用户名密码即可查看监控信息[^1]。 #### 六、事务管理 - 单数据源事务:使用`@Transactional`注解,默认绑定主数据源事务管理器 - 跨数据源事务:需引入分布式事务框架(如Seata)或使用JTA --- ### 注意事项 1. 确保各数据源的`Mapper`接口和`XML`文件路径隔离(如`com.example.mapper.master`和`com.example.mapper.slave`) 2. 动态数据源依赖需与MyBatis-Plus版本兼容 3. 生产环境中建议配置Druid连接池参数(如`initialSize`、`maxActive`) ---
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

冰点.

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值