java(spring boot 读写分离)双数据源,注解形式动态代理数据源

应用场景是我们一个线上项目,因为客户需要很高的并发量的导出excle文档,然后对于报表的SQL来说,因为数据量的原因,查询的时间相对来说是比较长的,

在SQL执行过程中,项目还在实时的运营,为了不影响运营,我们决定采用数据库读写分离,避免锁表以及并发效率上的影响。

 

这个例子写在spring boot + mybatis的架构上

使用的是application.properties如果需要使用yml转换一下格式就好了

#连接池
database.type=com.alibaba.druid.pool.DruidDataSource
#可读写数据库
database.d0.url=jdbc:mysql://10.10.59.10/test
database.d0.username=root
database.d0.password=root
database.d0.driver-class-name=com.mysql.jdbc.Driver
#只读数据库
database.d1.url=jdbc:mysql://10.10.59.11/test
database.d1.username=root
database.d1.password=root
database.d1.driver-class-name=com.mysql.jdbc.Driver
#Mapper配置文件
mybatis.mapper-locations=classpath*:/mapper/*Mapper.xml

首先我们来准备几个基础类

ReadWriteSplitRoutingDataSource.class 继承了 AbstractRoutingDataSource,这个类主要管理我们的多个数据源之间的路由
/**
 * 数据源路由
 */
class ReadWriteSplitRoutingDataSource extends AbstractRoutingDataSource {

    @Override
    protected Object determineCurrentLookupKey() {
        return DataBaseContextHolder.getDataBaseType();
    }

}
DataBaseContextHolder.class 自定义用来管理调配数据源的类 用 ThreadLocal解决了多线程情况下数据源错乱的问题
/**
 * 调配数据源
 */
public class DataBaseContextHolder {

    //区分主从数据源
    public enum DataBaseType {
        D0,D1
    }

    //线程局部变量
    private static final ThreadLocal<DataBaseType> contextHolder = new ThreadLocal<>();

    //往线程里边set数据类型
    public static void setDataBaseType(DataBaseType dataBaseType) {
        contextHolder.set(dataBaseType);
    }

    //从容器中获取数据类型
    public static DataBaseType getDataBaseType() {
        return contextHolder.get() == null ? DataBaseType.D0 : contextHolder.get();
    }

    //清空容器中的数据类型
    public static void clearDataBaseType() {
        contextHolder.remove();
    }

}

然后开始配置数据源

import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.beans.factory.annotation.Qualifier;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.boot.context.properties.ConfigurationProperties;
import org.springframework.boot.jdbc.DataSourceBuilder;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

import javax.sql.DataSource;
import java.util.HashMap;
import java.util.Map;

/**
 * 配置数据源
 */
@Configuration
public class DataSourceConfiguration {
    private static Logger LOGGER = LoggerFactory.getLogger(DataSourceConfiguration.class);

    //连接池
    @Value("${database.type}")
    private Class<? extends DataSource> dataSourceType;

    /**
     * 可读写数据源
     *
     * @return d0DataSource
     */
    @Bean(name = "d0DataSource")
    @ConfigurationProperties(prefix = "database.d0")
    public DataSource d0DataSource() {
        DataSource d0DataSource = DataSourceBuilder.create().type(dataSourceType).build();
        LOGGER.info("========D0: {}=========",d0DataSource);
        return d0DataSource;
    }

    /**
     * 只读数据源
     *
     * @return d1DataSource
     */
    @Bean(name = "d1DataSource")
    @ConfigurationProperties(prefix = "database.d1")
    public DataSource d1DataSource() {
        DataSource d1DataSource = DataSourceBuilder.create().type(dataSourceType).build();
        LOGGER.info("========D1: {}=========",d1DataSource);
        return d1DataSource;
    }

    /**
     * 把两个数据源装配在一起 这里不要用Autowired 会报错 要用Qualifier
     *
     * @param d0DataSource
     * @param d1DataSource
     * @return myRoutingDataSource
     */
    @Bean
    public DataSource myRoutingDataSource(@Qualifier("d0DataSource") DataSource d0DataSource,@Qualifier("d1DataSource") DataSource d1DataSource) {
        Map<Object,Object> targetDataSources = new HashMap<>();
        targetDataSources.put(DataBaseContextHolder.DataBaseType.D0,d0DataSource);
        targetDataSources.put(DataBaseContextHolder.DataBaseType.D1,d1DataSource);
        ReadWriteSplitRoutingDataSource myRoutingDataSource = new ReadWriteSplitRoutingDataSource();
        //设置默认数据源
        myRoutingDataSource.setDefaultTargetDataSource(d0DataSource);
        //设置双数据源
        myRoutingDataSource.setTargetDataSources(targetDataSources);
        return myRoutingDataSource;
    }

}

 数据源配置好了,接下来配置Mybatis

import org.apache.ibatis.session.SqlSessionFactory;
import org.mybatis.spring.SqlSessionFactoryBean;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.core.io.support.PathMatchingResourcePatternResolver;
import org.springframework.jdbc.datasource.DataSourceTransactionManager;
import org.springframework.transaction.PlatformTransactionManager;
import org.springframework.transaction.annotation.EnableTransactionManagement;

import javax.annotation.Resource;
import javax.sql.DataSource;

/**
 * Mybatis配置 给sqlSessionFactory绑定双数据源
 */
//开始事务
@EnableTransactionManagement
@Configuration
public class MybatisConfiguration {

    //双数据源
    @Resource(name = "myRoutingDataSource")
    private DataSource myRoutingDataSource;

    //Mapper文件包路径
    @Value("${mybatis.mapper-locations}")
    private String mybatisLocations;

    @Bean
    public SqlSessionFactory sqlSessionFactory() throws Exception {
        SqlSessionFactoryBean sqlSessionFactoryBean = new SqlSessionFactoryBean();
        //设置双数据源
        sqlSessionFactoryBean.setDataSource(myRoutingDataSource);
        //设置mapper文件路径
        sqlSessionFactoryBean.setMapperLocations(new PathMatchingResourcePatternResolver().getResources(mybatisLocations));
        return sqlSessionFactoryBean.getObject();
    }

    @Bean
    public PlatformTransactionManager platformTransactionManager() {
        //配置数据源事务管理
        return new DataSourceTransactionManager(myRoutingDataSource);
    }

}

接下来就开始配置我们的注解和切面

自定义一个注解

import java.lang.annotation.ElementType;
import java.lang.annotation.Retention;
import java.lang.annotation.RetentionPolicy;
import java.lang.annotation.Target;

//该注解应用在方法上
@Target({ElementType.METHOD,ElementType.TYPE})
//在运行时运行
@Retention(RetentionPolicy.RUNTIME)
public @interface ReadOnlyDB {
}

写一个切面来切这个注解 因为这个切面比较特殊,需要的优先级很高,所以需要继承Ordered类 设置一个优先级

import org.aspectj.lang.ProceedingJoinPoint;
import org.aspectj.lang.annotation.Around;
import org.aspectj.lang.annotation.Aspect;
import org.aspectj.lang.annotation.Pointcut;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.core.Ordered;
import org.springframework.stereotype.Component;

@Aspect
@Component
public class ReadOnlyConnectionInterceptor implements Ordered {

    public static final Logger LOGGER = LoggerFactory.getLogger(ReadOnlyConnectionInterceptor.class);

    /**
     * 切入点
     */
    @Pointcut("@annotation(com.beyondsoft.common.datasource.ReadOnlyDB)")
    public void msPointCut() {

    }

    //Around 我们从程序进入就开始处理,直至结束
    @Around("msPointCut()")
    public Object proceed(ProceedingJoinPoint proceedingJoinPoint) throws Throwable {
        try {
            LOGGER.info("---------------update database D1---------------");
            DataBaseContextHolder.setDataBaseType(DataBaseContextHolder.DataBaseType.D1);
            //方法执行完毕
            Object result = proceedingJoinPoint.proceed();
            return result;
        } finally {
            DataBaseContextHolder.clearDataBaseType();
            LOGGER.info("---------------end database D1---------------");
        }
    }

    @Override
    public int getOrder() {
        //最高优先级
        return Ordered.HIGHEST_PRECEDENCE;
    }
}

使用方法就是在你需要开启只读的service上注解上我们刚才定义的 @ReadOnlyDB

启动过程中可以看到数据源加载成功

分享图片

 

 

 数据源成功路由的效果如下图

分享图片

 

  如果大家有什么不解,或意见,欢迎在下方留言,楼主看到就会回复的,谢谢。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


摘要: 原创出处 https://www.bysocket.com 「公众号:泥瓦匠BYSocket 」欢迎关注和转载,保留摘要,谢谢! 目录 连接 连接池产生原因 连接池实现原理 小结 TEMPERANCE:Eat not to dullness;drink not to elevation.节制
摘要: 原创出处 https://www.bysocket.com 「公众号:泥瓦匠BYSocket 」欢迎关注和转载,保留摘要,谢谢! 一个优秀的工程师和一个普通的工程师的区别,不是满天飞的架构图,他的功底体现在所写的每一行代码上。-- 毕玄 1. 命名风格 【书摘】类名用 UpperCamelC
今天犯了个错:“接口变动,伤筋动骨,除非你确定只有你一个人在用”。哪怕只是throw了一个新的Exception。哈哈,这是我犯的错误。一、接口和抽象类类,即一个对象。先抽象类,就是抽象出类的基础部分,即抽象基类(抽象类)。官方定义让人费解,但是记忆方法是也不错的 —包含抽象方法的类叫做抽象类。接口
Writer :BYSocket(泥沙砖瓦浆木匠)微 博:BYSocket豆 瓣:BYSocketFaceBook:BYSocketTwitter :BYSocket一、引子文件,作为常见的数据源。关于操作文件的字节流就是 —FileInputStream&amp;FileOutputStream。
作者:泥沙砖瓦浆木匠网站:http://blog.csdn.net/jeffli1993个人签名:打算起手不凡写出鸿篇巨作的人,往往坚持不了完成第一章节。交流QQ群:【编程之美 365234583】http://qm.qq.com/cgi-bin/qm/qr?k=FhFAoaWwjP29_Aonqz
本文目录 线程与多线程 线程的运行与创建 线程的状态 1 线程与多线程 线程是什么? 线程(Thread)是一个对象(Object)。用来干什么?Java 线程(也称 JVM 线程)是 Java 进程内允许多个同时进行的任务。该进程内并发的任务成为线程(Thread),一个进程里至少一个线程。 Ja
Writer :BYSocket(泥沙砖瓦浆木匠)微 博:BYSocket豆 瓣:BYSocketFaceBook:BYSocketTwitter :BYSocket在面向对象编程中,编程人员应该在意“资源”。比如?1String hello = &quot;hello&quot;; 在代码中,我们
摘要: 原创出处 https://www.bysocket.com 「公众号:泥瓦匠BYSocket 」欢迎关注和转载,保留摘要,谢谢! 这是泥瓦匠的第103篇原创 《程序兵法:Java String 源码的排序算法(一)》 文章工程:* JDK 1.8* 工程名:algorithm-core-le
摘要: 原创出处 https://www.bysocket.com 「公众号:泥瓦匠BYSocket 」欢迎关注和转载,保留摘要,谢谢! 目录 一、父子类变量名相同会咋样? 有个小故事,今天群里面有个人问下面如图输出什么? 我回答:60。但这是错的,答案结果是 40 。我知错能改,然后说了下父子类变
作者:泥瓦匠 出处:https://www.bysocket.com/2021-10-26/mac-create-files-from-the-root-directory.html Mac 操作系统挺适合开发者进行写代码,最近碰到了一个问题,问题是如何在 macOS 根目录创建文件夹。不同的 ma
作者:李强强上一篇,泥瓦匠基础地讲了下Java I/O : Bit Operation 位运算。这一讲,泥瓦匠带你走进Java中的进制详解。一、引子在Java世界里,99%的工作都是处理这高层。那么二进制,字节码这些会在哪里用到呢?自问自答:在跨平台的时候,就凸显神功了。比如说文件读写,数据通信,还
1 线程中断 1.1 什么是线程中断? 线程中断是线程的标志位属性。而不是真正终止线程,和线程的状态无关。线程中断过程表示一个运行中的线程,通过其他线程调用了该线程的 方法,使得该线程中断标志位属性改变。 深入思考下,线程中断不是去中断了线程,恰恰是用来通知该线程应该被中断了。具体是一个标志位属性,
Writer:BYSocket(泥沙砖瓦浆木匠)微博:BYSocket豆瓣:BYSocketReprint it anywhere u want需求 项目在设计表的时候,要处理并发多的一些数据,类似订单号不能重复,要保持唯一。原本以为来个时间戳,精确到毫秒应该不错了。后来觉得是错了,测试环境下很多一
纯技术交流群 每日推荐 - 技术干货推送 跟着泥瓦匠,一起问答交流 扫一扫,我邀请你入群 纯技术交流群 每日推荐 - 技术干货推送 跟着泥瓦匠,一起问答交流 扫一扫,我邀请你入群 加微信:bysocket01
Writer:BYSocket(泥沙砖瓦浆木匠)微博:BYSocket豆瓣:BYSocketReprint it anywhere u want.文章Points:1、介绍RESTful架构风格2、Spring配置CXF3、三层初设计,实现WebService接口层4、撰写HTTPClient 客户
Writer :BYSocket(泥沙砖瓦浆木匠)什么是回调?今天傻傻地截了张图问了下,然后被陈大牛回答道“就一个回调…”。此时千万个草泥马飞奔而过(逃哈哈,看着源码,享受着这种回调在代码上的作用,真是美哉。不妨总结总结。一、什么是回调回调,回调。要先有调用,才有调用者和被调用者之间的回调。所以在百
Writer :BYSocket(泥沙砖瓦浆木匠)一、什么大小端?大小端在计算机业界,Endian表示数据在存储器中的存放顺序。百度百科如下叙述之:大端模式,是指数据的高字节保存在内存的低地址中,而数据的低字节保存在内存的高地址中,这样的存储模式有点儿类似于把数据当作字符串顺序处理:地址由小向大增加
What is a programming language? Before introducing compilation and decompilation, let&#39;s briefly introduce the Programming Language. Programming la
Writer :BYSocket(泥沙砖瓦浆木匠)微 博:BYSocket豆 瓣:BYSocketFaceBook:BYSocketTwitter :BYSocket泥瓦匠喜欢Java,文章总是扯扯Java。 I/O 基础,就是二进制,也就是Bit。一、Bit与二进制什么是Bit(位)呢?位是CPU
Writer:BYSocket(泥沙砖瓦浆木匠)微博:BYSocket豆瓣:BYSocket一、前言 泥瓦匠最近被项目搞的天昏地暗。发现有些要给自己一些目标,关于技术的目标:专注很重要。专注Java 基础 + H5(学习) 其他操作系统,算法,数据结构当成课外书博览。有时候,就是那样你越是专注方面越