当前位置:

首页 > 编程开发 > SpringBoot基于AbstractRoutingDataSource如何实现多数据源动态切换

SpringBoot基于AbstractRoutingDataSource如何实现多数据源动态切换

一、场景在生产业务中,有一些任务执行了耗时较长的查询操作,在实时性要求不高的时候,我们希望将这些查询sql分离出来,去从库查询,以减少应用对主数据库的压力。一种方案是在配置文件中配置多个数据源,然后通过配置类来获取数据源以及mapper相关的扫描配置,不同的数据源配置不佟的mapper扫描位置,然后需要哪一个数据源就注入哪一个mapper接口即可,这种方法比较简单。特征是通过mapper扫描位置区分数据源。第二种方案是配置一个默认使用的数据源,然后定义多个其他的数据源,使用aop形成注解式选择数据源。此种

本文目录

    一、场景

    在生产业务中,有一些任务执行了耗时较长的查询操作,在实时性要求不高的时候,我们希望将这些查询sql分离出来,去从库查询,以减少应用对主数据库的压力。

    一种方案是在配置文件中配置多个数据源,然后通过配置类来获取数据源以及mapper相关的扫描配置,不同的数据源配置不佟的mapper扫描位置,然后需要哪一个数据源就注入哪一个mapper接口即可,这种方法比较简单。特征是通过mapper扫描位置区分数据源。

    第二种方案是配置一个默认使用的数据源,然后定义多个其他的数据源,使用aop形成注解式选择数据源。此种方案实现的核心是对AbstractRoutingDataSource 类的继承。这是本文的重点。

    二、原理

    AbstractRoutingDataSource的多数据源动态切换的核心逻辑是:在程序运行时,把数据源数据源通过 AbstractRoutingDataSource 动态织入到程序中,灵活的进行数据源切换。
    基于AbstractRoutingDataSource的多数据源动态切换,可以实现读写分离。逻辑如下:

    /**
         * Retrieve the current target DataSource. Determines the
         * {@link #determineCurrentLookupKey() current lookup key}, performs
         * a lookup in the {@link #setTargetDataSources targetDataSources} map,
         * falls back to the specified
         * {@link #setDefaultTargetDataSource default target DataSource} if necessary.
         * @see #determineCurrentLookupKey()
         */
        protected DataSource determineTargetDataSource() {
            Assert.notNull(this.resolvedDataSources, "DataSource router not initialized");
            Object lookupKey = determineCurrentLookupKey();
            DataSource dataSource = this.resolvedDataSources.get(lookupKey);
            if (dataSource == null && (this.lenientFallback || lookupKey == null)) {
                dataSource = this.resolvedDefaultDataSource;
            }
            if (dataSource == null) {
                throw new IllegalStateException("Cannot determine target DataSource for lookup key [" + lookupKey + "]");
            }
            return dataSource;
        }
    /**
         * Determine the current lookup key. This will typically be
         * implemented to check a thread-bound transaction context.
         * 

    Allows for arbitrary keys. The returned key needs      * to match the stored lookup key type, as resolved by the      * {@link #resolveSpecifiedLookupKey} method.      */     @Nullable     protected abstract Object determineCurrentLookupKey();

    通过实现抽象方法determineCurrentLookupKey指定需要切换的数据源

    三、代码示例

    示例中主要依赖 

    com.alibaba.druid;tk.mybatis

    定义一个类用于关联数据源。通过 TheadLocal 来保存每个线程选择哪个数据源的标志(key)

    @Slf4j
    public class DynamicDataSourceContextHolder {
     
     
        private static final ThreadLocal contextHolder = new ThreadLocal();
        public static List dataSourceIds = new ArrayList();
     
        public static void setDataSourceType(String dataSourceType) {
            log.info("设置当前数据源为{}",dataSourceType);
            contextHolder.set(dataSourceType);
        }
     
        public static String getDataSourceType() {
            return contextHolder.get() ;
        }
     
        public static void clearDataSourceType() {
            contextHolder.remove();
        }
     
        public static boolean containsDataSource(String dataSourceId){
            log.info("list = {},dataId={}", JSON.toJSON(dataSourceIds),dataSourceId);
            return dataSourceIds.contains(dataSourceId);
        }
    }

    继承

    AbstractRoutingDataSource

    public class DynamicDataSource  extends AbstractRoutingDataSource {
     
        @Override
        protected Object determineCurrentLookupKey() {
     
            return  DynamicDataSourceContextHolder.getDataSourceType();
        }
    }

    配置主数据库master 与从数据库slave(略)。数据源配置可以从简

    @Configuration
    @tk.mybatis.spring.annotation.MapperScan(value = {"com.server.dal.dao"})
    @ConditionalOnProperty(name = "java.druid.datasource.master.url")
    public class JavaDruidDataSourceConfiguration {
     
        private static final Logger logger = LoggerFactory.getLogger(JavaDruidDataSourceConfiguration.class);
     
        @Resource
        private JavaDruidDataSourceProperties druidDataSourceProperties;
        @Primary
        @Bean(name = "masterDataSource", initMethod = "init", destroyMethod = "close")
        @ConditionalOnMissingBean(name = "masterDataSource")
        public DruidDataSource javaReadDruidDataSource() {
     
            DruidDataSource result = new DruidDataSource();
     
            try {
    //            result.setName(druidDataSourceProperties.getName());
                result.setUrl(druidDataSourceProperties.getUrl());
                result.setUsername(druidDataSourceProperties.getUsername());
                result.setPassword(druidDataSourceProperties.getPassword());
                result.setConnectionProperties(
                        "config.decrypt=false;config.decrypt.key=" + druidDataSourceProperties.getPwdPublicKey());
                result.setFilters("config");
                result.setMaxActive(druidDataSourceProperties.getMaxActive());
                result.setInitialSize(druidDataSourceProperties.getInitialSize());
                result.setMaxWait(druidDataSourceProperties.getMaxWait());
                result.setMinIdle(druidDataSourceProperties.getMinIdle());
                result.setTimeBetweenEvictionRunsMillis(druidDataSourceProperties.getTimeBetweenEvictionRunsMillis());
                result.setMinEvictableIdleTimeMillis(druidDataSourceProperties.getMinEvictableIdleTimeMillis());
                result.setValidationQuery(druidDataSourceProperties.getValidationQuery());
                result.setTestWhileIdle(druidDataSourceProperties.isTestWhileIdle());
                result.setTestOnBorrow(druidDataSourceProperties.isTestOnBorrow());
                result.setTestOnReturn(druidDataSourceProperties.isTestOnReturn());
                result.setPoolPreparedStatements(druidDataSourceProperties.isPoolPreparedStatements());
                result.setMaxOpenPreparedStatements(druidDataSourceProperties.getMaxOpenPreparedStatements());
     
                if (druidDataSourceProperties.isEnableMonitor()) {
                    StatFilter filter = new StatFilter();
                    filter.setLogSlowSql(druidDataSourceProperties.isLogSlowSql());
                    filter.setMergeSql(druidDataSourceProperties.isMergeSql());
                    filter.setSlowSqlMillis(druidDataSourceProperties.getSlowSqlMillis());
                    List list = new ArrayList<>();
                    list.add(filter);
                    result.setProxyFilters(list);
                }
     
            } catch (Exception e) {
     
                logger.error("数据源加载失败:", e);
     
            } finally {
                result.close();
            }
     
     
            return result;
        }
    }

    注意主从数据库的bean name

    配置DynamicDataSource 

    • targetDataSources 存放数据源的k-v对

    • defaultTargetDataSource 存放默认数据源

    配置事务管理器和SqlSessionFactoryBean

    @Configuration
    public class DynamicDataSourceConfig {
        private static final String MAPPER_LOCATION = "classpath*:sqlmap/dao/*Mapper.xml";
     
        @Bean(name = "dynamicDataSource")
        public DynamicDataSource dynamicDataSource(@Qualifier("masterDataSource") DruidDataSource masterDataSource,
                                                   @Qualifier("slaveDataSource") DruidDataSource slaveDataSource) {
            Map targetDataSource = new HashMap<>();
            DynamicDataSourceContextHolder.dataSourceIds.add("masterDataSource");
            targetDataSource.put("masterDataSource", masterDataSource);
            DynamicDataSourceContextHolder.dataSourceIds.add("slaveDataSource");
            targetDataSource.put("slaveDataSource", slaveDataSource);
            DynamicDataSource dataSource = new DynamicDataSource();
            dataSource.setTargetDataSources(targetDataSource);
            dataSource.setDefaultTargetDataSource(masterDataSource);
            return dataSource;
        }
     
        @Primary
        @Bean(name = "javaTransactionManager")
        @ConditionalOnMissingBean(name = "javaTransactionManager")
        public DataSourceTransactionManager transactionManager(@Qualifier("dynamicDataSource") DynamicDataSource druidDataSource) {
            return new DataSourceTransactionManager(druidDataSource);
        }
     
        @Bean(name = "sqlSessionFactoryBean")
        public SqlSessionFactoryBean myGetSqlSessionFactory(@Qualifier("dynamicDataSource") DynamicDataSource  dataSource) {
            SqlSessionFactoryBean sqlSessionFactoryBean = new SqlSessionFactoryBean();
            ResourcePatternResolver resolver = new PathMatchingResourcePatternResolver();
            try {
                sqlSessionFactoryBean.setMapperLocations(resolver.getResources(MAPPER_LOCATION));
            } catch (IOException e) {
                e.printStackTrace();
            }
            sqlSessionFactoryBean.setDataSource(dataSource);
            return sqlSessionFactoryBean;
        }
    }

    定义一个注解用于指定数据源

    @Target({ ElementType.METHOD, ElementType.TYPE })
    @Retention(RetentionPolicy.RUNTIME)
    @Documented
    public @interface TargetDataSource {
        String value();
    }

    切面的业务逻辑。注意指定order,以确保在开启事务之前执行 。

    @Aspect
    @Slf4j
    @Order(-1)
    @Component
    public class DataSourceAop {
     
        @Before("@annotation(targetDataSource)")
        public void changeDataSource(JoinPoint point, TargetDataSource targetDataSource) {
            String dsId = targetDataSource.value();
            if (!DynamicDataSourceContextHolder.containsDataSource(dsId)) {
                log.error("数据源[{}]不存在,使用默认数据源 > {}" + targetDataSource.value() + point.getSignature());
            } else {
                log.info("UseDataSource : {} > {}" + targetDataSource.value() + point.getSignature());
                DynamicDataSourceContextHolder.setDataSourceType(targetDataSource.value());
     
            }
        }
     
        @After("@annotation(targetDataSource)")
        public void restoreDataSource(JoinPoint point, TargetDataSource targetDataSource) {
            log.info("RevertDataSource : {} > {}"+targetDataSource.value()+point.getSignature());
            DynamicDataSourceContextHolder.clearDataSourceType();
        }
    }

    以上略去了pom.xml和application.yml

    使用示例

        @Resource
        private ShopBillDOMapper shopBillDOMapper;
     
    //使用默认数据源
        public ShopBillBO queryTestData(Integer id){
     
            return shopBillDOMapper.getByShopBillId(id);
        }
     
    //切换到指定的数据源
        @TargetDataSource("slaveDataSource")
        public ShopBill queryTestData2(Integer id){
            return shopBillDOMapper.getByShopBillId(id);
        }

    如果返回不同的结果就成功了!

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发
    相关文章 更多
    springBoot项目常用目录有哪些
    springBoot项目常用目录有哪些

    springBoot项目常用目录springBoot项目的目录结构及名规范介绍基于SpringBoot开发时的目录结构及命名规范,通过介绍能够为你解决,在实际项目中如何规划目录结构?如何命名目录更规范?各个目录分别代表什么含义?等三个问题。目录说明servicex//项目名|-admin-ui//管理服务前端代码(一般将UI和SERVICE放到一个工程中,便于管理)|-servicex-auth//模块1|-servicex-common//模块2|-servicex-gateway//模块3|-serv

    解析SpringBoot和SpringMVC之间的异同
    解析SpringBoot和SpringMVC之间的异同

    解析SpringBoot和SpringMVC之间的异同SpringBoot和SpringMVC是Java领域中非常重要的开发框架。虽然它们都属于Spring框架的一部分,但是在使用和功能上有一些明显的区别。本文将对SpringBoot和SpringMVC进行比较,解析它们之间的异同。首先,让我们来了解一下SpringBoot。SpringBo

    探索SpringCloud和SpringBoot在微服务领域的不同应用方式
    探索SpringCloud和SpringBoot在微服务领域的不同应用方式

    近年来,随着云计算和分布式架构的兴起,微服务架构的应用越来越广泛。而SpringCloud和SpringBoot作为Java开发中的两个重要框架,对于微服务的实现起到了重要的作用。然而,很多人对于它们在微服务领域的不同应用方式还存在一定的疑惑。本文将从不同的角度探索SpringCloud和SpringBoot在微服务中的应用方式。首先,我们来了解一下Spri

    SpringBoot和SpringMVC有何区别?
    SpringBoot和SpringMVC有何区别?

    SpringBoot与SpringMVC的不同之处在哪里?SpringBoot和SpringMVC是两个非常流行的Java开发框架,用于构建Web应用程序。尽管它们经常分别被使用,但它们之间的不同之处也是很明显的。首先,SpringBoot可以被看作是一个Spring框架的扩展或者增强版。它旨在简化Spring应用程序的初始化和配置过程,以帮助开发人

    比较SpringBoot和SpringMVC的异同
    比较SpringBoot和SpringMVC的异同

    SpringBoot和SpringMVC都是Java开发中常用的框架,但它们之间有一些明显的差异。本文将探究这两个框架的特点和用途,并对它们的差异进行比较。首先,我们来了解一下SpringBoot。SpringBoot是由Pivotal团队开发的,它旨在简化基于Spring框架的应用程序的创建和部署。它提供了一种快速、轻量级的方式来构建独立的、可执行

    SpringBoot与SpringMVC的不同点是什么?
    SpringBoot与SpringMVC的不同点是什么?

    SpringBoot和SpringMVC是Java开发中常用的两个框架,它们都是由Spring框架所提供的,但在功能和使用方式上有着一些区别。本文将分别介绍SpringBoot和SpringMVC的特点和区别。一、SpringBoot的特点:简化配置:SpringBoot通过约定优于配置的原则,大大简化了项目的配置过程。它可以自动配置项目所需要的参数,开发人

    比较和选择指南:SpringCloud与SpringBoot的功能比较
    比较和选择指南:SpringCloud与SpringBoot的功能比较

    SpringCloud和SpringBoot是目前Java领域中最热门的开源框架,它们分别提供了一套完善的微服务架构和快速构建应用程序的解决方案。本文将对它们的功能进行比较,并给出选择指南,以帮助读者了解它们的优势和适用场景。SpringBoot是一个用于开发Java应用程序的框架,它提供了一个简化的开发流程,集成了大量常用的功能和组件,减少了开发者的工作量

    SpringCloud与SpringBoot:分析它们之间的相似与不同
    SpringCloud与SpringBoot:分析它们之间的相似与不同

    深入剖析SpringCloud和SpringBoot的异同引言:在构建企业级应用程序时,Spring框架已经成为开发者们的首选。它提供了一种简单而强大的方式来构建独立于平台的应用程序。Spring框架由两个核心模块组成:SpringBoot和SpringCloud。虽然它们都可以帮助开发者快速搭建应用程序,但它们的目标和用途存在一些差异。本文将深入剖析Spr

    从架构角度看SpringCloud与SpringBoot的差异
    从架构角度看SpringCloud与SpringBoot的差异

    从架构角度看SpringCloud与SpringBoot的差异引言:在当今的互联网时代,构建分布式系统已经成为了一种必要的需求。而SpringBoot和SpringCloud正是为了满足这个需求而诞生的。尽管它们都是由Spring框架所提供的解决方案,但从架构角度来看,它们存在着一些重要的差异。本文将从架构的角度出发,对SpringBoot和SpringCl

    Java API 开发中使用 SpringBoot 的利弊分析
    Java API 开发中使用 SpringBoot 的利弊分析

    JavaAPI开发中使用SpringBoot的利弊分析随着互联网的快速发展和技术的不断更新迭代,Java技术在开发中的广泛应用引起了人们的重视。而SpringBoot作为一种微服务架构的解决方案,已经逐渐成为Java开发中的热门选择。那么,在JavaAPI开发中使用SpringBoot,到底有哪些利弊呢?下面来分析一下。利:简化开发

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。