游乐游手机版
首页/编程语言/文章详情

ShardingJDBC actual-data-nodes节点扩展方式

时间:2026-06-18 06:46
ShardingJDBC的actual-data-nodes支持在初始化阶段通过API动态修改节点列表,无需重启即可调整分片。测试中,利用@PostConstruct将节点配置从ds0 order$->{0 1}替换为ds0 order$->{[202101,202102]},验证路由正确生效。该方法适用于按时间分表等场景,可结合数据库动态读取表名实现灵活

ShardingJDBC actual-data-nodes 动态扩展功能自测验证

先说下测试背景:本次实验的核心目标,是验证 ShardingJDBC 中 actual-data-nodes 的动态扩展能力——在配置阶段预先定义好分片规则后,应用启动过程中能否通过 API 动态修改节点列表,从而实现无需重启服务即可调整分片范围的效果。下面将详细记录整个测试过程、配置细节以及实践中的关键注意事项。

动态修改 actual-data-nodes 的配置类实现

package com.shardingjdbc.shardingjdbcstu.config;

import lombok.AllArgsConstructor;
import org.apache.shardingsphere.core.yaml.config.sharding.YamlTableRuleConfiguration;
import org.apache.shardingsphere.shardingjdbc.spring.boot.sharding.SpringBootShardingRuleConfigurationProperties;
import org.springframework.stereotype.Component;

import ja vax.annotation.PostConstruct;
import ja va.util.Map;

/**
 * @author qb
 * @version 1.0
 * @since 2022/3/11 16:48
 */
@AllArgsConstructor
@Component
public class TestConfig {

    private final SpringBootShardingRuleConfigurationProperties shardingRuleConfigurationProperties;

    @PostConstruct
    public void init(){
        Map tables =
                shardingRuleConfigurationProperties.getTables();
        YamlTableRuleConfiguration order = tables.get("order");
        String actualDataNodesTo = order.getActualDataNodes();
        //TODO: 可以查询数据库,根据数据关联表
        StringBuilder stringBuilder = new StringBuilder("ds0.order$->{[");
        stringBuilder.append("202101,202102");
        stringBuilder.append("]}");
        order.setActualDataNodes(stringBuilder.toString());
        String actualDataNodes = order.getActualDataNodes();
        System.out.println(actualDataNodesTo);
        System.out.println(actualDataNodes);
        System.out.println(tables);
    }

}

这段代码的设计思路非常直接:在 Bean 初始化阶段(通过 @PostConstruct),获取 ShardingJDBC 自动注入的配置属性对象,然后直接修改 order 表的 actualDataNodes,将原本 YAML 中配置的 ds0.order$->{0..1} 替换为 ds0.order$->{[202101,202102]}。需要注意,setActualDataNodes 方法接收的是字符串参数,节点写法必须符合 ShardingJDBC 的表达式语法规则。代码中还预留了一个 TODO 标记:实际生产场景下,可以从数据库实时查询已存在的动态表名,再拼接成节点列表,实现自动化扩展。

分片规则 YAML 配置文件详解

spring:
  shardingsphere:
    # 参数配置,显示sql
    props:
      sql:
        show: true
    # 配置数据源
    datasource:
      # 给每个数据源取别名,下面的ds1,ds1任意取名字
      names: ds0
      # 给master-ds1每个数据源配置数据库连接信息
      ds0:
        #配置druid数据源
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.cj.jdbc.Driver
        url: jdbc:mysql://127.0.0.1:3306/ksd_order_db?useUnicode=true&characterEncoding=utf8&zeroDateTimeBeha vior=convertToNull&useSSL=true&serverTimezone=GMT%2B8
        username: root
        password: 123456
        maxPoolSize: 100
        minPoolSize: 5
      # 配置ds1-sla ve
#      ds1:
#        type: com.alibaba.druid.pool.DruidDataSource
#        driver-class-name: com.mysql.cj.jdbc.Driver
#        url: jdbc:mysql://192.168.100.110:3306/ksd_order_db?useUnicode=true&characterEncoding=utf8&tinyInt1isBit=false&useSSL=false&serverTimezone=GMT
#        username: root
#        password: 123456
#        maxPoolSize: 100
#        minPoolSize: 5
    # 配置默认数据源ds0
    sharding:
      # 默认数据源,主要用于写,注意一定要配置读写分离 ,注意:如果不配置,
      #那么就会把三个节点都当做从sla ve节点,新增,修改和删除会出错。
      default-data-source-name: ds0
      # 配置分表的规则
      tables:
        # ksd_order 逻辑表名
        order:
          # 数据节点:数据源$->{0..N}.逻辑表名$->{0..N}
          actual-data-nodes: ds0.order$->{0..1}  #只分表不分库
          # 拆分库策略,也就是什么样子的数据放入放到哪个数据库中。
#          database-strategy:
#            standard:
#              shardingColumn: tenantId  # 分片字段(分片键)
#              preciseAlgorithmClassName: com.shardingjdbc.shardingjdbcstu.algorithm.TenantShardingAlgorithm
#          # 拆分库策略,也就是什么样子的数据放入放到哪个数据库中。
#          database-strategy:
#            inline:  #inline 行表达时分片策略(核心,必须要掌握)
#              sharding-column: age    # 分片字段(分片键)
#              algorithm-expression: ds$->{age % 2} # 分片算法表达式
          # 拆分表策略,也就是什么样子的数据放入放到哪个数据表中。
          table-strategy:
            standard:
              shardingColumn:  userid #tenantId  # 分片字段(分片键)
              preciseAlgorithmClassName: com.shardingjdbc.shardingjdbcstu.algorithm.TenantShardingAlgorithm
#需求:用户变1000W的数据,对用户的数据进行分表和分库的操作,根据年龄单数储存在user1 偶数储存在user0
#同时age单数

YAML 配置采用了只分表不分库的方案,数据源仅配置了 ds0actual-data-nodes 初始值设置为 ds0.order$->{0..1},对应物理表 order0order1。分片策略选用 standard 精确分片,分片键为 userid,算法类为自定义的 TenantShardingAlgorithm。配置注释中保留了之前尝试分库以及 inline 表达式的历史痕迹,但本次测试的重点仅在于验证表节点列表的动态扩展能力,不涉及库维度分片。

分表节点配置验证:从 0..1 到动态节点列表

shardingJdbc的actual-data-nodes节点扩展方式

按照预期设计,当通过代码动态修改 actualDataNodes 后,对逻辑表 order 的查询应当路由到 order202101order202102 这两张物理表,而不再访问原始的 order0order1。为了验证这一结果,编写了两条 SQL 测试语句:

    @Select("select * from order where userid = #{userid} limit #{pageNo},#{pageSize}")
    List findOrders(
            @Param("userid") Long userid,
            @Param("pageNo") Integer pageNo,
            @Param("pageSize") Integer pageSize
    );

    @Select("select * from order limit #{pageNo},#{pageSize}")
    List findOrdersTo(
            @Param("pageNo") Integer pageNo,
            @Param("pageSize") Integer pageSize
    );

第一条 SQL 携带分片键 userid,会触发精确分片算法;第二条 SQL 不带分片键,采用全表扫描方式。看一下实际执行结果:

shardingJdbc的actual-data-nodes节点扩展方式

shardingJdbc的actual-data-nodes节点扩展方式

从执行结果可以清晰看出:最后一次查询原本期望路由到 order0order1,但实际路由行为完全遵循了 Config 中动态设置的 ds0.order$->{[202101,202102]}。这表明通过 @PostConstruct 修改 actualDataNodes 的方法完全生效,ShardingJDBC 在初始化完毕后会使用最新的节点配置进行路由决策。

测试总结与生产实践建议

本次测试记录了一个关键结论:ShardingJDBC 的 actual-data-nodes 支持在运行时通过 API 动态修改,且修改后立即生效(前提是在初始化阶段完成配置覆盖)。这一特性对于需要动态增加分片表或调整分片范围的场景具有重要参考价值——例如基于时间维度的分表时,应用可以在启动过程中从数据库读取已存在的表名列表,替换掉固定的节点配置,从而避免每次新增表都需重启应用。当然,本测试中使用的 @PostConstruct 仅是一种简单实现方式,实际生产环境还可结合配置中心、热加载机制等更灵活的方案来达到动态扩展的目的。

来源:https://www.jb51.net/program/3657446lw.htm
上一篇Python多线程脚本假死问题排查与解决指南 下一篇OpenFeign多场景参数传递方式详解
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
深入解析 TransactionProxyFactoryBean 功能实现与实战案例
编程语言 · 2026-07-02

深入解析 TransactionProxyFactoryBean 功能实现与实战案例

本文通过一个订单处理系统的实际案例,探讨了Spring框架中TransactionProxyFactoryBean的功能实现。文章分析了其如何通过代理模式为普通JavaBean添加声明式事务管理能力,详细阐述了其配置方式、内部工作机制,包括如何创建AOP代理以及如何与PlatformTransactionManager协作。最后,通过对比现代基于注解的事务管

TransactionProxyFactoryBean 在 Java 编程中的应用与配置详解
编程语言 · 2026-07-02

TransactionProxyFactoryBean 在 Java 编程中的应用与配置详解

本文探讨了TransactionProxyFactoryBean在Spring框架中的应用,重点解析其作为声明式事务管理核心组件的工作原理。文章阐述了该工厂Bean如何通过AOP代理机制为目标对象自动添加事务边界,详细说明了其关键配置属性如事务管理器、事务属性及目标对象的设置方法,并分析了其内部代理创建流程。最后,讨论了其优势与在现代Spring应用中的演进

WebService实战案例详解与应用场景解析
编程语言 · 2026-07-02

WebService实战案例详解与应用场景解析

本文通过一个具体的订单查询案例,深入解析WebService的核心概念与实战应用。内容涵盖WebService的基本原理、使用Java和CXF框架构建服务端与客户端的完整步骤,以及XML数据绑定、服务发布与调用等关键技术细节。旨在为开发者提供清晰、实用的WebService开发指导,帮助理解其在实际项目中的集成与通信机制。

HttpClient与其他HTTP库性能功能对比分析
编程语言 · 2026-07-02

HttpClient与其他HTTP库性能功能对比分析

在Java开发中,处理HTTP请求有多种库可选,其中ApacheHttpClient以其成熟稳定著称。本文对比分析了HttpClient与其他主流HTTP库(如JDK原生HttpURLConnection、OkHttp、SpringRestTemplate及Retrofit)在功能特性、性能表现、易用性及适用场景上的差异,旨在帮助开发者根据项目需求,如对连接

MemSQL数据库实战应用案例深度解析
编程语言 · 2026-07-02

MemSQL数据库实战应用案例深度解析

本文探讨了MemSQL在实时分析场景中的实战应用。通过剖析一个典型的电商实时用户行为分析项目案例,阐述了MemSQL如何利用其混合事务 分析处理能力、内存优化与列式存储特性,高效处理高并发数据流与复杂查询。文章重点介绍了技术选型考量、架构设计、性能优化策略及实际效果,为面临类似实时数据处理挑战的项目提供参考。