§ MySQL迁移/升级到GreatSQL
本文介绍如何从MySQL迁移/升级到GreatSQL数据库。
§ 为什么要迁移/升级
GreatSQL相对于MySQL社区版有着众多优秀特性,包括且不仅限以下:
2. 性能提升扩展 | GreatSQL 8.0.32-25 | MySQL 8.0.32 |
---|---|---|
AP引擎 | ✔️ | 仅云上HeatWave |
InnODB并行查询 | ✔️ | 仅主键扫描 |
并行LOAD DATA | ✔️ | ❌ |
InnoDB事务ReadView无锁优化 | ✔️ | ❌ |
InnoDB事务大锁拆分优化 | ✔️ | ❌ |
InnoDB Mutexes拆分优化 | ✔️ | ❌ |
MEMORY引擎优化 | ✔️ | ❌ |
InnoDB Flushing优化 | ✔️ | ❌ |
InnoDB快速索引创建优化 | ✔️ | ❌ |
VARCHAR/BLOB/JSON类型存储单列压缩 | ✔️ | ❌ |
数据字典中存储单列压缩信息 | ✔️ | ❌ |
3. 面向开发者提升改进 | GreatSQL 8.0.32-25 | MySQL 8.0.32 |
InnoDB全文搜索改进 | ✔️ | ❌ |
更多Hash/Digest函数 | ✔️ | ❌ |
Oracle兼容-数据类型 | ✔️ | ❌ |
Oracle兼容-函数 | ✔️ | ❌ |
Oracle兼容-SQL语法 | ✔️ | ❌ |
Oracle兼容-存储程序 | ✔️ | ❌ |
4. 基础特性提升改进 | GreatSQL 8.0.32-25 | MySQL 8.0.32 |
MGR提升-地理标签 | ✔️ | ❌ |
MGR提升-仲裁节点 | ✔️ | ❌ |
MGR提升-读写节点绑定VIP | ✔️ | ❌ |
MGR提升-快速单主模式 | ✔️ | ❌ |
MGR提升-智能选主机制 | ✔️ | ❌ |
MGR提升-全新流控算法 | ✔️ | ❌ |
information_schema表数量 | 95 | 65 |
全局性能和状态指标 | 853 | 434 |
Per-Table性能指标 | ✔️ | ❌ |
Per-Index性能指标 | ✔️ | ❌ |
Per-User性能指标 | ✔️ | ❌ |
Per-Client性能指标 | ✔️ | ❌ |
Per-Thread性能指标 | ✔️ | ❌ |
全局查询相应耗时统计 | ✔️ | ❌ |
SHOW INNODB ENGINE STATUS增强 | ✔️ | ❌ |
回滚段信息增强 | ✔️ | ❌ |
临时表信息增强 | ✔️ | ❌ |
用户统计信息增强 | ✔️ | ❌ |
Slow log信息增强 | ✔️ | ❌ |
5.安全性提升 | GreatSQL 8.0.32-25 | MySQL 8.0.32 |
国密支持 | ✔️ | ❌ |
备份加密 | ✔️ | ❌ |
审计日志入库 | ✔️ | ❌ |
PAM认证插件 | ✔️ | 仅企业版 |
审计插件 | ✔️ | 仅企业版 |
Keyring存储在Hashicorp Vault中 | ✔️ | 仅企业版 |
二进制日志加密 | ✔️ | ❌ |
临时文件加密 | ✔️ | ❌ |
强制加密 | ✔️ | ❌ |
6. 运维便利性提升 | GreatSQL 8.0.32-25 | MySQL 8.0.32 |
线程池(Threadpool) | ✔️ | 仅企业版 |
备份锁 | ✔️ | ❌ |
SHOW GRANTS扩展 | ✔️ | ❌ |
表损坏动作扩展 | ✔️ | ❌ |
杀掉不活跃事务 | ✔️ | ❌ |
START TRANSACTION WITH CONSISTENT SNAPSHOT扩展 | ✔️ | ❌ |
§ 迁移/升级前准备
首先下载GreatSQL 8.0版本安装包,推荐选择最新的GreatSQL 8.0.32-25版本 (opens new window),至于选择RPM还是二进制包看具体情况及个人喜好。
本文选用二进制包方式安装。
正式迁移/升级之前,务必做好数据备份,可以采用以下几种方式:
- 停机维护,复制当前的数据库目录,做一个全量物理备份,这种方式恢复起来最快。
- 利用mysqldump/xtrabackup等备份工具,执行一个全量备份。
- 利用主从复制或MGR,在其中一个节点执行备份,或者令某个节点临时下线/退出,作为备用节点。
接下来,要区分本次迁移/升级属于以下哪种情况:
- 从MySQL 5.7直接一次性迁移+升级到GreatSQL 8.0.32。
- 从MySQL 8.0.32及以下版本迁移/升级到GreatSQL 8.0.32。
- 从MySQL 5.6及更低版本迁移+升级到GreatSQL 8.0.32,则应该先逐次升级大版本,例如5.5=>5.6,5.6=>5.7最新版本,而后再一次性升级到GreatSQL 8.0.32-25。
如果是前两种,直接参考文档:GreatSQL 5.7升级到8.0 的方法进行迁移/升级即可,过程是完全一样的。
本文重点说说第三种场景。
§ 迁移过程
GreatSQL数据库是不支持直接原地(in-place)降级的,因此需要采用 逻辑备份+导入 的方式完成迁移。
如果是直接在MySQL 8.0.33及以上版本的datadir下,指定GreatSQL 8.0.32-25版本的mysqld二进制文件启动,则可能会报告类似下面的错误:
[ERROR] [MY-012530] [InnoDB] Unknown redo log format (5). Please follow the instructions at http://dev.mysql.com/doc/refman/8.0/en/ upgrading-downgrading.html.
[ERROR] [MY-012930] [InnoDB] Plugin initialization aborted with error Generic error.
[ERROR] [MY-010334] [Server] Failed to initialize DD Storage Engine
[ERROR] [MY-010020] [Server] Data Dictionary initialization failed.
[ERROR] [MY-010119] [Server] Aborting
2
3
4
5
即便用xtrabackup工具物理备份的文件恢复后,也是无法启动的,也会报告类似上面的错误信息。
因此,只有一种方法,那就是 逻辑备份+导入。
首先,用 mysqldump
备份全部数据:
$ mysqldump -S/data/MySQL/mysql.sock -A --triggers --routines --events > /backup/MySQL/fullbackup-`date +'%Y%m%d'`.sql
将备份文件copy到GreatSQL版本环境中,并执行导入即可,导入过程中可能会报错,加上 -f
选项并忽略这些错误就好(高版本中有些表在低版本中不存在,略过)。
$ mysql -S/data/GreatSQL/mysql.sock -f < /backup/MySQL/fullbackup-`date +'%Y%m%d'`.sql
#可能会报告类似下面的错误信息,忽略即可
...
ERROR 3723 (HY000) at line 543: The table 'replication_group_configuration_version' may not be created in the reserved tablespace 'mysql'.
ERROR 1146 (42S02) at line 554: Table 'mysql.replication_group_configuration_version' doesn't exist
ERROR 1146 (42S02) at line 555: Table 'mysql.replication_group_configuration_version' doesn't exist
ERROR 1146 (42S02) at line 556: Table 'mysql.replication_group_configuration_version' doesn't exist
ERROR 1146 (42S02) at line 557: Table 'mysql.replication_group_configuration_version' doesn't exist
ERROR 3723 (HY000) at line 567: The table 'replication_group_member_actions' may not be created in the reserved tablespace 'mysql'.
ERROR 1146 (42S02) at line 583: Table 'mysql.replication_group_member_actions' doesn't exist
ERROR 1146 (42S02) at line 584: Table 'mysql.replication_group_member_actions' doesn't exist
ERROR 1146 (42S02) at line 585: Table 'mysql.replication_group_member_actions' doesn't exist
ERROR 1146 (42S02) at line 586: Table 'mysql.replication_group_member_actions' doesn't exist
...
2
3
4
5
6
7
8
9
10
11
12
13
14
15
如果数据量较大的话,逻辑备份+导入过程耗时较久,要有心理准备。
§ 注意事项
在MySQL 8.0.26中引入MGR组视图UUID特性(group_replication_view_change_uuid
(opens new window))。因此,如果当前有个MGR集群的版本是8.0.25及以下,则无法实现平滑升级迁移到8.0.26版本。需要申请一次停机维护时间,对MGR集群中的各个节点实施in-place升级,完成从8.0.25到8.0.26及更高版本的升级。
详情请参考:将MGR集群从GreatSQL-8.0.25平滑升级到GreatSQL-8.0.32 (opens new window)。
参考文档