时间:2021-04-16
操作实践背景:
travelrecord表定义为10个分片,尝试将10个分片中的2个分片转移到第二台MySQL上,并完成记录, 要求最快的数据迁移做法,中断业务时间最短。
思路一利用mysqldump:
在这里我们只针对mysql innodb engine,而且配置bin-log的数据库进行分析。因为是将10个分片中的两个分片进行迁移,其实就是数据库的迁移过程,就是将10个数据库中的两个数据迁移到另外一台机器;中断业务最短的做法就是:
1) 准备mycat新的配置文件备用,以便快速切换配置文件。
2) 在业务地峰期间,如凌晨,使用mysqldump进行数据库的全量备份(附带--flush-logs);
3) 将两个分片数据库的全量备份第二台机器上进行全量恢复;
4) 停止mycat服务器;
5) 停止第一台机器的mycat实例(假设原来的分片在一个mysql实例);
6) 拷贝第一台机器的binlog文件到第二台机器,并使用mysql的mysqlbinlog工具进行这两个数据库的增量数据的恢复;
7) 启动第一台数据实例,校验迁移的两个分片数据正确性(主要看记录数);
8) 替换mycat的配置文件并启动mycat实例。
在该方案中,业务中断的时间主要是处理mysqlbinlog的增量数据恢复。
思路二利用mysql的ms机制做级联复制
在这里二个片比如第一个分片db11,第二个分片db21,我在db11上面再做个级联主从,db11-->db16,在db21上面做个级联主从db21->db26,这样到时候数据实时同步,中断业务比较短的做法是:
1)准备mycat新配置文件备用,以便快速切换配置文件。
2)在业务低峰期间,比如凌晨时分,开始操作,停止mycat服务器。
3)进行db11-db16主备切换,进行db21-db26主备切换。
4)停止第一台机器的mycat实例。
5)在主备切换过程中,旧的主db11、db21上面的binlog中如果有新的dml、ddl操作,就用mysqlbinlog解析出来,在新的主db16和db26上面重做一遍。
6)使用mk-table-checksum工具检查新主从db16->db11、db26->db21的数据一致性。
7)替换mycat的配置文件并启动mycat实例。
好了,关于MySQL分片中快速数据迁移相关知识就给大家介绍到这里,希望对大家有所帮助。
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
在对MySQL数据库进行迁移的时候,有时候也需要迁移源数据库内的用户与权限。对于这个迁移我们可以从mysql.user表来获取用户的相关权限来生成相应的SQL语
01主分片是什么?分片集群中的每一个数据库都有一个主分片,这个主分片上保存了当前数据库中没有被分片的集合的数据,主分片(primaryshard)和主节点(pr
说明:MariaDB是基于MySQL的开源数据库,兼容MySQL,现有的MySQL数据库可以迁移到MariaDB中使用MariaDB下载:32位:http://
本文简述如何使用docker部署mysql,同时持久化数据.我们会用到tutum-docker-mysql这个项目来搭建一个mysql,省去重头写dockerf
mysql通过拷贝数据文件的方式进行数据库迁移--环境windows将源机器A数据库拷贝到目标机器B:我先在目标机器B上安装MySQL,停止mysql服务,然后