当前位置:   article > 正文

线上运行的系统实现从单库单表迁移至分库分表的实现方案_tdsql的单表可以在线直接转换为分表

tdsql的单表可以在线直接转换为分表

一. 需要长时间停机的迁移方案

迁移过程:

1. 将业务服务停机(比如使用Tomcat容器,不在对外提供服务)

2. 启动多个分库分表服务,从单库单表的DB中抽取数据,并发送至数据库分库分表中间件,接着由中间件将数据写入到分库分表的DB中。这个过程所耗费的时间与数据量、分库分表服务的个数、是否使用多线程等因素相关。

3. 通过修改配置的方式,断开业务服务与单库单表DB的连接,使业务服务连接到数据库分库分表中间件上,并重启业务服务。

缺点:

整套迁移流程需要一气呵成,当单库单表的数据量较大时,可能需要使系统停机几个小时,在此期间无法正常对外提供服务,影响了用户使用,且对实时迁移的开发人员来做造成的负担也很重。

二. 不需要长时间停机的分库分表双写方案

迁移过程:

1.部署数据库分库分表中间件,部署本次用于分库分表的数据库集群。

2. 修改业务系统代码,使业务系统不仅写入数据至单库单表,同时也写入至数据库中间件,由中间件再将数据写入到分库分表内。(需要重启系统)

3. 启动数据抽取工具,定时抽取单库单表内的数据与分库分表内进行比对(比如使用时间戳比对),执行覆盖或新增策略。

4. 数据抽取工具运行一段时间后,单库单表内的数据与分库分表内的数据实现完全一致,此时再通过修改业务系统配置的方式,切断与单库单表的写入动作,只将写入请求发送至数据库中间件,写入分库分表,停用数据抽取工具,最后重启业务系统,迁移完毕。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/代码探险家/article/detail/961085
推荐阅读
相关标签
  

闽ICP备14008679号