将本地 MySQL 数据库迁移到 AWS RDS
在这篇文章中,我将分享使用 mysql 将本地 mysql 数据库中的数据迁移到 aws rds 上新创建的实例的详细步骤。
背景
我在 2023 年参与了一个全栈项目,手动处理数据库和后端到 aws 的生产部署。今年早些时候,我关闭了所有基础设施,因为我每月在数据库上积累了太多成本(不感谢我的过度配置)。
现在,快进到这个月,我仍然有大量 aws 积分(作为社区构建者的福利)将于今年年底到期。我试图恢复我的项目,却发现它并不像我想象的那么容易。
首先,我没有正确创建可用于恢复生产数据的快照,并且不断出现访问错误。我还想起了整个部署过程是多么令人痛苦的手动操作,以及我如何没有记录我所采取的任何步骤(我也不记得它们)。
这是一个教训,所以这一次,我记录了整个过程。正如我从未完成的 udemy 课程中的一句话:
“在继续自动化之前,您必须知道如何手动执行任务”。
因此,我将首先分享我手动执行迁移的步骤,在接下来的文章中,我将编写脚本来使用 terraform 提供基础设施,并在成功后将本地数据转储到远程数据库中发射。
这也是我自己分配的正在进行的项目的一部分,旨在通过构建管道来自动化整个项目的部署来了解有关 ci/cd 的更多信息。
a) 手动步骤
1. 在 amazon rds 上创建新的数据库实例
这一次的配置更加用心和实用。尽管这是一个“生产部署”,但我仍然选择了可能是最便宜的运行成本,因为它不是实际的实时产品(这也影响了我选择不添加的一些安全选项)。
我总结了我在“创建数据库”向导中选择的选项,如下:
aws region: eu-west-2 database creation method: standard create engine type/edition/version: mysql/mysql community/mysql 8.0.35 use case template: free tier credential settings: define these as you'd prefer db instance class: db.t3.micro storage: gp2, 20gb, auto-scaling enabled up to 100gb connectivity: - define these for your specific use-case; i chose not to use an ec2 - public access: yes, because i wanted to connect to the database locally via mysql workbench database authentication: password auth additional configuration: - i created one database from here; but you can also leave it blank and create one when you get access via workbench others: - use default options or modify for your use-case deletion protection: - enabled (to dissuade myself from deleting easily like the last time)
预计每月费用:
2.本地连接rds实例
实例启动成功后,使用mysql客户端连接实例。这假设您已安装并运行 mysql 服务器。
您还需要实例端点以及您在凭据设置中定义的用户名和密码来运行此命令:
mysql -h sample_endpoint.rds.amazonaws.com -u username_sample -p
注意:您的实例将使用所选 vpc 安全组的正确入站和出站规则创建。
但是,如果您在连接时遇到错误,请确认您的 ip 地址是否包含在入站规则的允许来源中。当我在特定位置使用其 ip 地址创建实例时,我遇到了类似的问题,当我尝试使用另一个位置的不同 ip 地址连接时,连接超时。
[可选] 创建数据库
如果您在创建实例时跳过了附加配置步骤,您可以在此步骤创建一个:
create database sample_db;
3. 从本地数据库导入数据
为此,您首先需要使用 mysqldump 命令将本地数据库中的架构和数据导出到 .sql 转储文件:
mysqldump -u root -p local_db_name > sample_dump.sql
注意:如果您在尝试导出时遇到错误,请查看我在 stack overflow 上的问题以及可以解决一些可能问题的答案。
然后,使用 mysql 命令将转储文件导入到您的 rds 实例中:
mysql -h sample_endpoint.rds.amazonaws.com -u username_sample -p sample_db <h4> 4. [可选]通过mysql workbench连接到您的rds实例 </h4> <p>确认您能够毫无问题地连接到实例,并检查数据库内的架构和数据以确认它们也已正确导入。</p> <h4> 无法连接? </h4>
- 确保您已正确配置公共访问设置,或者
- 使用 ec2 实例安全地连接到数据库并通过实例运行 sql 命令。确保ec2实例也在rds实例所在的vpc内。
接下来是:
- 使用本文中所需的数据库凭据(以及必要的基础设施访问)部署到 app runner,
- 使用 terraform 编写脚本,并且
- 创建 ci/cd 管道来更新未来的后端和前端更新。