GreatSQL Clone在线备份恢复热备增量压缩全攻略【免费下载链接】GreatSQLGreatSQL是一款开源免费数据库可在普通硬件上满足金融级应用场景具有高可用、高性能、高兼容、高安全等特性可作为MySQL或Percona Server for MySQL的理想可选替换。项目地址: https://gitcode.com/GreatSQL/GreatSQL作为一款开源免费数据库GreatSQL 的Clone 在线备份恢复能力堪称 DBA 的救场神器无需停服即可完成全量热备支持基于页面跟踪的增量备份还能在传输与落盘两个层面压缩数据把备份对生产环境的影响降到最低。无论你是要把 GreatSQL 快速拉起一个从库还是构建一套热备增量压缩的完整备份恢复方案Clone 插件都能用几条 SQL 搞定。一、什么是 GreatSQL Clone 在线备份恢复Clone 是 GreatSQL 内置的备份恢复插件核心原理是在本地或远程实例之间复制一份物理数据快照。它的最大价值在于在线——克隆过程中源实例Donor可以持续对外提供服务业务零感知彻底告别传统mysqldump逻辑备份耗时长、锁表严重的痛点。它的三大招牌能力正是你需要的能力说明典型场景️ 热备份在线全量克隆不锁业务日常全量备份、快速扩容只读实例➕ 增量备份PAGE TRACK页面跟踪只拷贝变化数据周期性增量备份节省时间与空间 压缩备份网络层 文件层双重压缩跨机房传输、长期归档大幅降低带宽与磁盘成本Clone 插件的实现代码全部开源核心逻辑在 plugin/clone/ 目录数据压缩相关实现在 sql/clone_compress.cc参数定义见 plugin/clone/src/clone_plugin.cc。二、一键安装 Clone 插件克隆前先装上插件一条 SQL 即可INSTALL PLUGIN clone SONAME mysql_clone.so;安装后可用SHOW PLUGINS;确认状态并查看克隆历史表SHOW PLUGINS; -- 确认 clone 插件已 ACTIVE SELECT * FROM mysql.clone_history; -- 克隆历史记录 SELECT * FROM performance_schema.clone_status; -- 当前克隆状态 SELECT * FROM performance_schema.clone_progress; -- 克隆进度明细 提示mysql.clone_history保存每次克隆的任务结果是排查克隆失败原因的第一现场。三、热备第一步本地全量备份的最快方法本地克隆无需网络是备份到本机磁盘的最快全量热备方式一条语句完成CLONE LOCAL DATA DIRECTORY /data/backup/clone_full;执行后源实例会在线生成一份完整的物理数据目录快照业务读写不受影响。之后可以把该目录直接作为新实例的数据目录启动或者继续做增量克隆的基础快照。对应核心流程可参考源码 plugin/clone/src/clone_local.cc 中的plugin_clone_local实现。四、增量备份PAGE TRACK 页面跟踪增量克隆全量备份之后数据每天都在变。如果每次都重新全量克隆既费时间又费带宽。GreatSQL 的增量克隆方案基于PAGE TRACK页面跟踪机制只需在全量克隆时开启页面跟踪之后就能精准克隆出上次备份以来发生变化的数据页。开启页面跟踪的全量备份CLONE LOCAL DATA DIRECTORY /data/backup/clone_base ENABLE PAGE TRACK;基于跟踪页面的增量克隆CLONE LOCAL DATA DIRECTORY /data/backup/clone_incr ENABLE PAGE TRACK;增量克隆会读取页面跟踪日志只把变更过的数据页拷贝到新目录数据量通常只有全量的百分之几到十几备份窗口大幅缩短。✅ 组合策略推荐每周一次开启 PAGE TRACK 的全量备份 每天一次增量克隆再配合定期清理过期备份目录就是一套性价比极高的热备增量备份体系。增量备份的页面跟踪逻辑在 plugin/clone/src/clone_client.cc 与 plugin/clone/src/clone_local.cc 中实现感兴趣可深入研读。五、远程在线备份一条 SQL 拉出新实例要快速搭建从库、构建高可用集群或迁移实例用远程克隆一步到位CLONE INSTANCE FROM backup_user192.168.1.10:3306 IDENTIFIED BY backup_pass DATA DIRECTORY /data/mysql_clone/data;克隆完成后GreatSQL 会自动重启实例并加载克隆数据一个可用的新实例即复制粘贴完成整个过程业务无感知。远程克隆的协调逻辑在 plugin/clone/src/clone_server.cc 中。远程克隆的安全加固仅允许可信 Donor设置clone_valid_donor_list白名单防止从陌生地址克隆数据SET GLOBAL clone_valid_donor_list 192.168.1.10:3306,192.168.1.11:3306;启用加密传输通过clone_ssl_key、clone_ssl_cert配置 SSL 证书克隆流量全程加密。恢复前校验一致性performance_schema.clone_status与clone_progress可实时监控克隆进度与状态。六、压缩全攻略网络压缩 文件压缩怎么选备份文件动辄几十上百 GB压缩是省带宽、省磁盘的关键。GreatSQL Clone 提供了两层独立压缩可按需组合网络层压缩传输中压缩控制数据在网络传输过程中的压缩适合跨机房、跨地域备份SET GLOBAL clone_enable_compression ON; -- 开启网络压缩 SET GLOBAL clone_compression_algorithm ZSTD; -- 算法ZSTD默认/ ZLIB SET GLOBAL clone_zstd_compression_level 3; -- ZSTD 压缩级别 1~10默认 3文件层压缩落盘压缩在文件写入备份目录时压缩备份文件直接以压缩格式落盘归档更省空间SET GLOBAL clone_file_compress CLONE_FILE_COMPRESS_ZSTD; -- NONE/LZ4/ZSTD SET GLOBAL clone_file_compress_threads 4; -- 并行压缩线程默认 4 SET GLOBAL clone_file_compress_zstd_level 1; -- ZSTD 级别 1~19默认 1选型建议 追求极致速度、磁盘充足文件层选LZ4压缩快、CPU 开销小 追求高压缩比、网络带宽紧张文件层选ZSTD并适当调高级别 只做跨机房传输、不在本地留备份只开clone_enable_compression即可。 实测思路参考官方测试用例 mysql-test/suite/clone/r/clone_compress.result 覆盖了本地增量 ZSTD 压缩克隆的完整流程可作为你验证压缩效果的最佳脚本。七、性能调优让克隆跑得更快更稳克隆默认参数已足够稳健但在大实例上合理调优收益明显常用参数如下参数默认值建议作用clone_buffer_size4M32M~128M数据传输缓冲区越大磁盘 IO 并行度越高clone_max_concurrency816~32最大并发线程数适合多核高 IO 机器clone_autotune_concurrencyON保持 ON自动调节并发避免压垮系统clone_max_network_bandwidth0不限按需设置 MiB/s限制网络带宽保护业务流量clone_max_data_bandwidth0不限按需设置 MiB/s限制磁盘 IO 带宽避免影响在线业务clone_block_ddlOFF按需开启克隆期间是否阻塞 DDL配合clone_ddl_timeout使用例如一个 500G 的实例想要快而稳地克隆可以这样配置SET GLOBAL clone_buffer_size 64 * 1024 * 1024; -- 64M 缓冲区 SET GLOBAL clone_max_concurrency 16; -- 16 个并发线程 SET GLOBAL clone_max_network_bandwidth 200; -- 限速 200 MiB/s这些参数在 plugin/clone/src/clone_plugin.cc 中定义最大并发支持到 128 线程弹性十足。八、恢复实战克隆数据如何找回克隆数据恢复的核心是让新实例追平到源实例的最新状态。GreatSQL 支持两种恢复模式通过clone_data_recovery_mode切换SET GLOBAL clone_data_recovery_mode CLONE_DATA_RECOVERY_GTID; -- 按 GTID 追平默认 SET GLOBAL clone_data_recovery_mode CLONE_DATA_RECOVERY_BINLOG_POSITION; -- 按 binlog 位点追平GTID 模式主从环境首选克隆后自动从 GTID 集合继续同步简单可靠binlog 位点模式适合未开启 GTID 的传统主从架构。远程克隆完成后实例会自动恢复并重启本地克隆目录则可通过将其作为新实例的datadir启动来完成恢复配合 binlog 继续追平最新数据。九、总结一套方案覆盖全部备份场景GreatSQL Clone 在线备份恢复用四条 SQL 就能覆盖最核心的备份诉求全量热备CLONE LOCAL在线快照业务零停机增量备份ENABLE PAGE TRACK页面级增量备份又快又省远程克隆CLONE INSTANCE FROM秒建新实例扩从库、搭集群利器压缩归档网络层 文件层双重压缩带宽磁盘成本双降。对于追求高可用、高性能、高安全的金融级应用GreatSQL 的 Clone 插件正是替代传统mysqldump逻辑备份的理想选择。动手实践时不妨从一条CLONE LOCAL开始配合 mysql-test/suite/clone/ 下的官方测试脚本逐步搭建起属于你自己的热备增量压缩备份体系。【免费下载链接】GreatSQLGreatSQL是一款开源免费数据库可在普通硬件上满足金融级应用场景具有高可用、高性能、高兼容、高安全等特性可作为MySQL或Percona Server for MySQL的理想可选替换。项目地址: https://gitcode.com/GreatSQL/GreatSQL创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
