最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Spring實(shí)現(xiàn)動(dòng)態(tài)數(shù)據(jù)源切換的方法總結(jié)

 更新時(shí)間:2023年06月19日 10:41:19   作者:京東云開(kāi)發(fā)者  
這篇文章主要為大家詳細(xì)介紹了一種Spring實(shí)現(xiàn)動(dòng)態(tài)數(shù)據(jù)源切換的方法,文中的示例代碼講解詳細(xì),具有一定的學(xué)習(xí)價(jià)值,感興趣的小伙伴可以跟隨小編一起了解一下

1 目標(biāo)

不在現(xiàn)有查詢(xún)代碼邏輯上做任何改動(dòng),實(shí)現(xiàn)dao維度的數(shù)據(jù)源切換(即表維度)

2 使用場(chǎng)景

節(jié)約bdp的集群資源。接入新的寬表時(shí),通常uat驗(yàn)證后就會(huì)停止集群釋放資源,在對(duì)應(yīng)的查詢(xún)服務(wù)器uat環(huán)境時(shí)需要查詢(xún)的是生產(chǎn)庫(kù)的表數(shù)據(jù)(uat庫(kù)表因?yàn)閎dp實(shí)時(shí)任務(wù)停止,沒(méi)有數(shù)據(jù)落入),只進(jìn)行服務(wù)器配置文件的改動(dòng)而無(wú)需進(jìn)行代碼的修改變更,即可按需切換查詢(xún)的數(shù)據(jù)源。

2.1 實(shí)時(shí)任務(wù)對(duì)應(yīng)的集群資源

2.2 實(shí)時(shí)任務(wù)產(chǎn)生的數(shù)據(jù)進(jìn)行存儲(chǔ)的兩套環(huán)境

2.3 數(shù)據(jù)使用系統(tǒng)的兩套環(huán)境(查詢(xún)展示數(shù)據(jù))

即需要在zhongyouex-bigdata-uat中查詢(xún)生產(chǎn)庫(kù)的數(shù)據(jù)。

3 實(shí)現(xiàn)過(guò)程

3.1 實(shí)現(xiàn)重點(diǎn)

  • org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource
    spring提供的這個(gè)類(lèi)是本次實(shí)現(xiàn)的核心,能夠讓我們實(shí)現(xiàn)運(yùn)行時(shí)多數(shù)據(jù)源的動(dòng)態(tài)切換,但是數(shù)據(jù)源是需要事先配置好的,無(wú)法動(dòng)態(tài)的增加數(shù)據(jù)源。
  • Spring提供的Aop攔截執(zhí)行的mapper,進(jìn)行切換判斷并進(jìn)行切換。

注:另外還有一個(gè)就是ThreadLocal類(lèi),用于保存每個(gè)線程正在使用的數(shù)據(jù)源。

3.2 AbstractRoutingDataSource解析

public abstract class AbstractRoutingDataSource extends AbstractDataSource 
implements InitializingBean{
    @Nullable
    private Map<Object, Object> targetDataSources;
    @Nullable
    private Object defaultTargetDataSource;
    @Override
    public Connection getConnection() throws SQLException {
        return determineTargetDataSource().getConnection();
    }
    protected DataSource determineTargetDataSource() {
        Assert.notNull(this.resolvedDataSources, "DataSource router not initialized");
        Object lookupKey = determineCurrentLookupKey();
        DataSource dataSource = this.resolvedDataSources.get(lookupKey);
        if (dataSource == null && (this.lenientFallback || lookupKey == null)) {
            dataSource = this.resolvedDefaultDataSource;
        }
        if (dataSource == null) {
            throw new IllegalStateException("Cannot determine target DataSource for lookup key [" + lookupKey + "]");
        }
        return dataSource;
    }
    @Override
    public void afterPropertiesSet() {
        if (this.targetDataSources == null) {
            throw new IllegalArgumentException("Property 'targetDataSources' is required");
        }
        this.resolvedDataSources = new HashMap<>(this.targetDataSources.size());
        this.targetDataSources.forEach((key, value) -> {
            Object lookupKey = resolveSpecifiedLookupKey(key);
            DataSource dataSource = resolveSpecifiedDataSource(value);
            this.resolvedDataSources.put(lookupKey, dataSource);
        });
        if (this.defaultTargetDataSource != null) {
            this.resolvedDefaultDataSource = resolveSpecifiedDataSource(this.defaultTargetDataSource);
        }
    }

從上面源碼可以看出它繼承了AbstractDataSource,而AbstractDataSource是javax.sql.DataSource的實(shí)現(xiàn)類(lèi),擁有g(shù)etConnection()方法。獲取連接的getConnection()方法中,重點(diǎn)是determineTargetDataSource()方法,它的返回值就是你所要用的數(shù)據(jù)源dataSource的key值,有了這個(gè)key值,resolvedDataSource(這是個(gè)map,由配置文件中設(shè)置好后存入targetDataSources的,通過(guò)targetDataSources遍歷存入該map)就從中取出對(duì)應(yīng)的DataSource,如果找不到,就用配置默認(rèn)的數(shù)據(jù)源。

看完源碼,我們可以知道,只要擴(kuò)展AbstractRoutingDataSource類(lèi),并重寫(xiě)其中的determineCurrentLookupKey()方法返回自己想要的key值,就可以實(shí)現(xiàn)指定數(shù)據(jù)源的切換!

3.3 運(yùn)行流程

  • 我們自己寫(xiě)的Aop攔截Mapper
  • 判斷當(dāng)前執(zhí)行的sql所屬的命名空間,然后使用命名空間作為key讀取系統(tǒng)配置文件獲取當(dāng)前mapper是否需要切換數(shù)據(jù)源
  • 線程再?gòu)娜朱o態(tài)的HashMap中取出當(dāng)前要用的數(shù)據(jù)源
  • 返回對(duì)應(yīng)數(shù)據(jù)源的connection去做相應(yīng)的數(shù)據(jù)庫(kù)操作

3.4 不切換數(shù)據(jù)源時(shí)的正常配置

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:tx="http://www.springframework.org/schema/tx"
       xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx.xsd">
<!-- clickhouse數(shù)據(jù)源   -->
    <bean id="dataSourceClickhousePinpin" class="org.apache.commons.dbcp2.BasicDataSource" destroy-method="close" lazy-init="true">
        <property name="url" value="${clickhouse.jdbc.pinpin.url}" />
    </bean>
    <bean id="singleSessionFactoryPinpin" class="org.mybatis.spring.SqlSessionFactoryBean">
        <!-- ref直接指向 數(shù)據(jù)源dataSourceClickhousePinpin  -->
<property name="dataSource" ref="dataSourceClickhousePinpin" />
    </bean>
</beans>

3.5 進(jìn)行動(dòng)態(tài)數(shù)據(jù)源切換時(shí)的配置

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:tx="http://www.springframework.org/schema/tx"       xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx.xsd">
<!-- clickhouse數(shù)據(jù)源 1  -->
    <bean id="dataSourceClickhousePinpin" class="org.apache.commons.dbcp2.BasicDataSource" destroy-method="close" lazy-init="true">
        <property name="url" value="${clickhouse.jdbc.pinpin.url}" />
    </bean>
<!-- clickhouse數(shù)據(jù)源 2  -->
    <bean id="dataSourceClickhouseOtherPinpin" class="org.apache.commons.dbcp2.BasicDataSource" destroy-method="close" lazy-init="true">
        <property name="url" value="${clickhouse.jdbc.other.url}" />
    </bean>
 <!-- 新增配置 封裝注冊(cè)的兩個(gè)數(shù)據(jù)源到multiDataSourcePinpin里 -->
 <!-- 對(duì)應(yīng)的key分別是 defaultTargetDataSource和targetDataSources-->
    <bean id="multiDataSourcePinpin" class="com.zhongyouex.bigdata.common.aop.MultiDataSource">
      <!-- 默認(rèn)使用的數(shù)據(jù)源-->
<property name="defaultTargetDataSource" ref="dataSourceClickhousePinpin"></property>
        <!-- 存儲(chǔ)其他數(shù)據(jù)源,對(duì)應(yīng)源碼中的targetDataSources -->
<property name="targetDataSources">
            <!-- 該map即為源碼中的resolvedDataSources-->
            <map>
                <!-- dataSourceClickhouseOther 即為要切換的數(shù)據(jù)源對(duì)應(yīng)的key -->
<entry key="dataSourceClickhouseOther" value-ref="dataSourceClickhouseOtherPinpin"></entry>
            </map>
        </property>
    </bean>
    <bean id="singleSessionFactoryPinpin" class="org.mybatis.spring.SqlSessionFactoryBean">
        <!-- ref指向封裝后的數(shù)據(jù)源multiDataSourcePinpin  -->
<property name="dataSource" ref="multiDataSourcePinpin" />
    </bean>
</beans>

核心是AbstractRoutingDataSource,由spring提供,用來(lái)動(dòng)態(tài)切換數(shù)據(jù)源。我們需要繼承它,來(lái)進(jìn)行操作。這里我們自定義的com.zhongyouex.bigdata.common.aop.MultiDataSource就是繼承了AbstractRoutingDataSource

package com.zhongyouex.bigdata.common.aop;
import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource;
/**
 * @author: cuizihua
 * @description: 動(dòng)態(tài)數(shù)據(jù)源
 * @date: 2021/9/7 20:24
 * @return
 */
public class MultiDataSource extends AbstractRoutingDataSource {
    /* 存儲(chǔ)數(shù)據(jù)源的key值,InheritableThreadLocal用來(lái)保證父子線程都能拿到值。
     */
    private static final ThreadLocal<String> dataSourceKey = new InheritableThreadLocal<String>();
    /**
     * 設(shè)置dataSourceKey的值
     *
     * @param dataSource
     */
    public static void setDataSourceKey(String dataSource) {
        dataSourceKey.set(dataSource);
    }
    /**
     * 清除dataSourceKey的值
     */
    public static void toDefault() {
        dataSourceKey.remove();
    }
    /**
     * 返回當(dāng)前dataSourceKey的值
     */
    @Override
    protected Object determineCurrentLookupKey() {
        return dataSourceKey.get();
    }
}

3.6 AOP代碼

package com.zhongyouex.bigdata.common.aop;
import com.zhongyouex.bigdata.common.util.LoadUtil;
import lombok.extern.slf4j.Slf4j;
import org.aspectj.lang.JoinPoint;
import org.aspectj.lang.reflect.MethodSignature;
import java.lang.reflect.Method;
/**
 * 方法攔截  粒度在mapper上(對(duì)應(yīng)的sql所屬xml)
 * @author cuizihua
 * @desc 切換數(shù)據(jù)源
 * @create 2021-09-03 16:29
 **/
@Slf4j
public class MultiDataSourceInterceptor {
//動(dòng)態(tài)數(shù)據(jù)源對(duì)應(yīng)的key
    private final String otherDataSource = "dataSourceClickhouseOther";
    public void beforeOpt(JoinPoint mi) {
//默認(rèn)使用默認(rèn)數(shù)據(jù)源
        MultiDataSource.toDefault();
        //獲取執(zhí)行該方法的信息
        MethodSignature signature = (MethodSignature) mi.getSignature();
        Method method = signature.getMethod();
        String namespace = method.getDeclaringClass().getName();
//本項(xiàng)目命名空間統(tǒng)一的規(guī)范為xxx.xxx.xxxMapper
        namespace = namespace.substring(namespace.lastIndexOf(".") + 1);
//這里在配置文件配置的屬性為xxxMapper.ck.switch=1 or 0  1表示切換
        String isOtherDataSource = LoadUtil.loadByKey(namespace, "ck.switch");
        if ("1".equalsIgnoreCase(isOtherDataSource)) {
            MultiDataSource.setDataSourceKey(otherDataSource);
            String methodName = method.getName();
        }
    }
}

3.7 AOP代碼邏輯說(shuō)明

通過(guò)org.aspectj.lang.reflect.MethodSignature可以獲取對(duì)應(yīng)執(zhí)行sql的xml空間名稱(chēng),拿到sql對(duì)應(yīng)的xml命名空間就可以獲取配置文件中配置的屬性決定該xml是否開(kāi)啟切換數(shù)據(jù)源了。

3.8 對(duì)應(yīng)的aop配置

<!--動(dòng)態(tài)數(shù)據(jù)源-->
<bean id="multiDataSourceInterceptor" class="com.zhongyouex.bigdata.common.aop.MultiDataSourceInterceptor" ></bean>
<!--將自定義攔截器注入到spring中-->
<aop:config proxy-target-class="true" expose-proxy="true">
    <aop:aspect ref="multiDataSourceInterceptor">
        <!--切入點(diǎn),也就是你要監(jiān)控哪些類(lèi)下的方法,這里寫(xiě)的是DAO層的目錄,表達(dá)式需要保證只掃描dao層-->
        <aop:pointcut id="multiDataSourcePointcut" expression="execution(*  com.zhongyouex.bigdata.clickhouse..*.*(..)) "/>
        <!--在該切入點(diǎn)使用自定義攔截器-->
        <aop:before method="beforeOpt" pointcut-ref="multiDataSourcePointcut" />
    </aop:aspect>
</aop:config>

到此這篇關(guān)于Spring實(shí)現(xiàn)動(dòng)態(tài)數(shù)據(jù)源切換的方法總結(jié)的文章就介紹到這了,更多相關(guān)Spring動(dòng)態(tài)數(shù)據(jù)源切換內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • 詳解SpringBoot構(gòu)建Docker鏡像的3種方式

    詳解SpringBoot構(gòu)建Docker鏡像的3種方式

    這篇文章主要介紹了SpringBoot構(gòu)建Docker鏡像的3種方式,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2020-06-06
  • 解決java字符串轉(zhuǎn)換成時(shí)間Unparseable date出錯(cuò)的問(wèn)題

    解決java字符串轉(zhuǎn)換成時(shí)間Unparseable date出錯(cuò)的問(wèn)題

    這篇文章主要介紹了解決java字符串轉(zhuǎn)換成時(shí)間Unparseable date出錯(cuò)的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2021-06-06
  • 如何手動(dòng)安裝Gradle并配置IDEA使用Gradle構(gòu)建

    如何手動(dòng)安裝Gradle并配置IDEA使用Gradle構(gòu)建

    本文給大家分享手動(dòng)安裝Gradle并配置IDEA使用Gradle構(gòu)建的步驟,本文給大家介紹的非常詳細(xì),感興趣的朋友一起看看吧
    2025-04-04
  • Java如何取掉json數(shù)據(jù)中值為null的屬性字段

    Java如何取掉json數(shù)據(jù)中值為null的屬性字段

    這篇文章主要介紹了Java如何取掉json數(shù)據(jù)中值為null的屬性字段,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2022-03-03
  • MyBatis里映射文件sql語(yǔ)句爆紅問(wèn)題及解決方案

    MyBatis里映射文件sql語(yǔ)句爆紅問(wèn)題及解決方案

    文章介紹了在MyBatis映射文件中SQL語(yǔ)句爆紅的問(wèn)題及其解決方法,解決方法是在設(shè)置中將SQL的全局方言設(shè)為None,然后應(yīng)用并確認(rèn)設(shè)置即可
    2025-03-03
  • @RequestBody獲取不到參數(shù)的問(wèn)題

    @RequestBody獲取不到參數(shù)的問(wèn)題

    這篇文章主要介紹了@RequestBody獲取不到參數(shù)的問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-11-11
  • SpringBoot中@Valid對(duì)List校驗(yàn)失效問(wèn)題的有效解決方法

    SpringBoot中@Valid對(duì)List校驗(yàn)失效問(wèn)題的有效解決方法

    在Spring Boot應(yīng)用開(kāi)發(fā)中,我們經(jīng)常需要對(duì)傳入的請(qǐng)求參數(shù)進(jìn)行校驗(yàn),以確保數(shù)據(jù)的合法性和安全性,然而,當(dāng)我們嘗試對(duì)列表(List)類(lèi)型的參數(shù)進(jìn)行校驗(yàn)時(shí),可能會(huì)遇到校驗(yàn)失效的問(wèn)題,本文將詳細(xì)探討這一問(wèn)題的失效原因,并提供有效的解決方法,需要的朋友可以參考下
    2025-07-07
  • Java使用建造者模式實(shí)現(xiàn)辦理手機(jī)套餐功能詳解

    Java使用建造者模式實(shí)現(xiàn)辦理手機(jī)套餐功能詳解

    這篇文章主要介紹了Java使用建造者模式實(shí)現(xiàn)辦理手機(jī)套餐功能,較為詳細(xì)的描述了建造者模式的概念、原理并結(jié)合實(shí)例形式分析了Java使用建造者模式實(shí)現(xiàn)的辦理手機(jī)套餐功能具體步驟與相關(guān)操作注意事項(xiàng),需要的朋友可以參考下
    2018-05-05
  • idea創(chuàng)建springboot項(xiàng)目和springcloud項(xiàng)目的詳細(xì)教程

    idea創(chuàng)建springboot項(xiàng)目和springcloud項(xiàng)目的詳細(xì)教程

    這篇文章主要介紹了idea創(chuàng)建springboot項(xiàng)目和springcloud項(xiàng)目方法,本文通過(guò)圖文并茂的形式給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2020-10-10
  • spring-cloud入門(mén)之eureka-server(服務(wù)發(fā)現(xiàn))

    spring-cloud入門(mén)之eureka-server(服務(wù)發(fā)現(xiàn))

    本篇文章主要介紹了spring-cloud入門(mén)之eureka-server(服務(wù)發(fā)現(xiàn)),小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2018-01-01

最新評(píng)論

饶平县| 武川县| 博客| 克拉玛依市| 澜沧| 北川| 黄陵县| 金昌市| 泾阳县| 轮台县| 赤水市| 石门县| 海兴县| 策勒县| 清涧县| 沙洋县| 乌鲁木齐县| 隆安县| 银川市| 津市市| 碌曲县| 文登市| 门头沟区| 临潭县| 连平县| 星子县| 平远县| 克什克腾旗| 玉门市| 岑巩县| 东莞市| 赞皇县| 阳谷县| 玉门市| 江西省| 葵青区| 安义县| 龙里县| 深水埗区| 宿州市| 华阴市|