将本地数据库迁移到 AWS Aurora
Migrate an on-prem database to AWS Aurora
我在本地有一个 postgres 数据库 运行,我想将其迁移到 AWS Aurora(或 AWS postgres)。
我已经 pg_dump
得到了我想要的数据库,它被压缩了 ~30gb。
我应该如何上传此文件并将 AWS RDS 实例从中获取到 pg_restore
?
要求:
没有其他人使用该数据库,因此我们可以接受大量停机时间和对数据库的独占锁定。我们希望迁移尽可能便宜
目前为止我tried/looked:
- 运行
pg_restore
在具有远程目标的本地文件上 - 未知定价总计
我也想尽可能便宜地做这件事,但我不确定我是否理解他们的定价策略。
他们的定价是:
Storage Rate [=10=].10 per GB-month
I/O Rate [=10=].20 per 1 million requests
Replicated Write I/Os [=10=].20 per million replicated write I/Os
pg_restore
算作一个请求吗?该数据库有大约 22 亿个条目,如果每个条目都是 1 个请求,是否仅重新创建数据库就需要花费 440 美元?
AWS 数据库迁移服务 - 看起来这将是最便宜的(因为它是免费的?)但它只能通过连接到本地数据库来工作。未压缩的数据约为 200gb,我不确定使用 DMS
进行一对一复制是否有意义
我读过 this article 但我仍然不清楚进行迁移的最佳方法。
我们可以接受这需要一段时间,我们只是希望尽可能便宜。
提前致谢!
迁移时需要注意的几点
AWS Database Migration Service - it looks like this would be the cheapest (as it's free?)
他们免费提供的服务是一个虚拟机(包含软件),它提供了将数据库移动到他们的某些 RDS 服务的计算能力和功能。
即使该服务是免费的,您仍需为任何 RDS 使用支付正常费用
他们提供的数量与他们用来为您的数据提供服务的 EBS(底层磁盘)大致相关。一个非常大和复杂的查询可能需要一些 I/O,两者并不相等。
EBS使用量估算可见here
As an example, a medium sized website database might be 100 GB in size and expect to average 100 I/Os per second over the course of a month. This would translate to per month in storage costs (100 GB x [=11=].10/month), and approximately per month in request costs (~2.6 million seconds/month x 100 I/O per second * [=11=].10 per million I/O).
我的个人建议:仅使用集合的一部分(可能是 5%)来克隆您的数据库。在那件作品上使用 DMS。您可以在几分钟内看到账单是如何为您计算的。然后您可以估算完整数据库迁移的价格
我在本地有一个 postgres 数据库 运行,我想将其迁移到 AWS Aurora(或 AWS postgres)。
我已经 pg_dump
得到了我想要的数据库,它被压缩了 ~30gb。
我应该如何上传此文件并将 AWS RDS 实例从中获取到 pg_restore
?
要求:
没有其他人使用该数据库,因此我们可以接受大量停机时间和对数据库的独占锁定。我们希望迁移尽可能便宜
目前为止我tried/looked:
- 运行
pg_restore
在具有远程目标的本地文件上 - 未知定价总计
我也想尽可能便宜地做这件事,但我不确定我是否理解他们的定价策略。
他们的定价是:
Storage Rate [=10=].10 per GB-month
I/O Rate [=10=].20 per 1 million requests
Replicated Write I/Os [=10=].20 per million replicated write I/Os
pg_restore
算作一个请求吗?该数据库有大约 22 亿个条目,如果每个条目都是 1 个请求,是否仅重新创建数据库就需要花费 440 美元?
AWS 数据库迁移服务 - 看起来这将是最便宜的(因为它是免费的?)但它只能通过连接到本地数据库来工作。未压缩的数据约为 200gb,我不确定使用 DMS
进行一对一复制是否有意义
我读过 this article 但我仍然不清楚进行迁移的最佳方法。
我们可以接受这需要一段时间,我们只是希望尽可能便宜。
提前致谢!
迁移时需要注意的几点
AWS Database Migration Service - it looks like this would be the cheapest (as it's free?)
他们免费提供的服务是一个虚拟机(包含软件),它提供了将数据库移动到他们的某些 RDS 服务的计算能力和功能。
即使该服务是免费的,您仍需为任何 RDS 使用支付正常费用
他们提供的数量与他们用来为您的数据提供服务的 EBS(底层磁盘)大致相关。一个非常大和复杂的查询可能需要一些 I/O,两者并不相等。 EBS使用量估算可见here
As an example, a medium sized website database might be 100 GB in size and expect to average 100 I/Os per second over the course of a month. This would translate to per month in storage costs (100 GB x [=11=].10/month), and approximately per month in request costs (~2.6 million seconds/month x 100 I/O per second * [=11=].10 per million I/O).
我的个人建议:仅使用集合的一部分(可能是 5%)来克隆您的数据库。在那件作品上使用 DMS。您可以在几分钟内看到账单是如何为您计算的。然后您可以估算完整数据库迁移的价格