用Percona将阿里云RDS数据迁移至自建的MySQL8.0的过程

前言：

记录一次，从阿里云RDS(MySQL8.0)至自建的MySQL8.0的数据迁移过程，认识到了Percona XtraBackup的强大与好用。

本手册参考阿里云文档下，附加森哥自己操作过程整理而成的。

参考资料：RDS MySQL 物理备份文件恢复到自建数据库

系统及应用环境：

操作系统：CentOS 7.6 X64

数据库：MySQL 8.0

备份软件：Percona XtraBackup 8.0

在目标服务器上，安装MySQL 8.0以及Percona XtraBackup 8.0

Percona XtraBackup 8.0安装文档：Installing Percona XtraBackup

yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm
percona-release enable-only tools release
yum install percona-xtrabackup-80
yum install -y qpress

执行xtrabackup解压命令时，会用到qpress，这里就先预装好。

准备源数据

下载AliyunRDS物理备份文件，备份文件的格式为：.xb文件

数据下载到目标服务器上。

重要通知：源数据库，目前暂不能有过 exchange partition之类的操作。这是percona目前存在着的bug问题，未来，应该会被修复。

开始恢复数据

## 解包
cat <数据备份文件名>_qp.xb | xbstream -x -v -C /data/mysqlback
?
## MySQL 8.0解压
xtrabackup --decompress --remove-original --target-dir=/data/mysqlback    

执行查看命令：

ls -rtl /data/mysqlback

执行如下命令，恢复解压好的备份文件。

xtrabackup --prepare --target-dir=/data/mysqlback

重要说明 ，若是您的数据库存在分区表，在执行这一条命令的时候，将会出错，这个是Percona软件本身存在的bug，未来应该会被修复。建议将该库先移出去再执行。

完成后，得到如处结果：

xtrabackup --datadir=/data/mysql2 --copy-back --target-dir=/data/mysqlback

直至执行完成后，即可进行最后的操作。在这个过程中，原来数据库的账户与密码，将会一并带入，不需要再想去修改其他密码，当然了，为了防万一，森哥在后面也会提到如何重置密码的操作。

注意的是：目标目录需为空，即：/data/mysql2 这个目录，建议使用新的路径。

这里有遇到一点小问题，在阿里云提供的文档上面，原先提供的文档有误，包括售后刚开始回答的也一样的问题。结果就半夜的时候，他们就及时更新了文档，不过我已被这个折腾了一整天。后面是上后台提问，来回几个回合他们，他们可能也意识到自己的错误及时更新了文档。如下图：

更新前：

更新后：

收尾工作

将备份中提供的backup-my.cnf与本地的my.cnf进行整合，下面为森哥自己整合的结果，仅供参考。

[root@kube-worker9 mysql]# cat /etc/my.cnf
# For advice on how to change settings please see
# http://dev.mysql.com/doc/refman/8.0/en/server-configuration-defaults.html
?
[mysqld]
#
# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
#
# Remove the leading "# " to disable binary logging
# Binary logging captures changes between backups and is enabled by
# default. It's default setting is log_bin=binlog
# disable_log_bin
#
# Remove leading # to set options mainly useful for reporting servers.
# The server defaults are faster for transactions and fast SELECTs.
# Adjust sizes as needed, experiment to find the optimal values.
# join_buffer_size = 128M
# sort_buffer_size = 2M
# read_rnd_buffer_size = 2M
#
# Remove leading # to revert to previous value for default_authentication_plugin,
# this will increase compatibility with older clients. For background, see:
# https://dev.mysql.com/doc/refman/8.0/en/server-system-variables.html#sysvar_default_authentication_plugin
# default-authentication-plugin=mysql_native_password
?
?
#datadir=/var/lib/mysql
datadir=/data/mysql2
socket=/var/lib/mysql/mysql.sock
?
max_connections=2000
mysqlx_max_connections=2000
lower_case_table_names=1
transaction_isolation=READ-COMMITTED
?
max_allowed_packet = 100000M
wait_timeout=2880000
interactive_timeout = 2880000
?
innodb_checksum_algorithm=crc32
innodb_log_checksums=1
innodb_data_file_path=ibdata1:12M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=1572864000
innodb_page_size=16384
#innodb_undo_directory=./
#innodb_undo_tablespaces=2
server_id=2446206122
innodb_log_checksums=ON
innodb_redo_log_encrypt=OFF
innodb_undo_log_encrypt=OFF
#server_uuid=67b959f8-c5a1-11e9-8ab2-48d53963e04b
#master_key_id=0
?
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
?
#innodb_log_file_size=60M
#innodb_buffer_pool_size=1024M

要注意的是：innodb_data_file_path=ibdata1:12M:autoextend 这句中的数值 ，若mysql无法正常启动，查看日志，遇到ibdata1的错误，经查ibdata1的大小为12M，故将其中改为12M，即可正常运行。

由于森哥是使用yum install -y mysql-server，故不支持下面这两句，直接注释掉即可：

#innodb_undo_directory=./
#innodb_undo_tablespaces=2

下面这两句是RDS上的相关配置。与我本地无法兼容，故也注释掉。

#server_uuid=67b959f8-c5a1-11e9-8ab2-48d53963e04b
#master_key_id=0

现在，对新的数据库的数据文件夹进行设置权限。

chown -R mysql:mysql /data/mysql2
chmod -R 755 /data/mysql2

重启mysql。若是正常，那就进下一步的root密码重置。

systemctl start mysqld

在my.cnf的[mysqld]中加入skip-grant-tables，最后结果如下：

#datadir=/var/lib/mysql
datadir=/data/mysql2
socket=/var/lib/mysql/mysql.sock
?
skip-grant-tables
?
max_connections=2000
mysqlx_max_connections=2000
lower_case_table_names=1
transaction_isolation=READ-COMMITTED

然后重启一下mysql后，即可直接进入，直接将root密码设置为空。

mysql -u
[root@kube-worker9 data]# mysql -u root
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 8
Server version: 8.0.16 MySQL Community Server - GPL
?
Copyright (c) 2000, 2019, Oracle and/or its affiliates. All rights reserved.
?
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
?
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
?
mysql> use mysql;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A
?
mysql> update user set authentication_string = '' where user = 'root';
Query OK, 0 rows affected (0.02 sec)
Rows matched: 0  Changed: 0  Warnings: 0
?
mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.01 sec)
?
mysql> \q
Bye

去掉my.cnf的[mysqld]中加入skip-grant-tables后再重启mysql

接着使用重启进入数据库是为root用户设置密码。

mysql -u root -p
ALTER USER 'root'@'localhost' IDENTIFIED BY '三种或以上的八位字符';

至于，利用Percona XtraBackup实现数据还原的整个过程结束。可以交付使用。