0

我的目标是在 S3 上实时存储 RDS 数据。

我发现的一个是 aws dms 服务,但它并没有准确记录它是如何工作的,所以我很犹豫是否要介绍它。

  1. 满载如何工作?

我正在考虑的是满载+ CDC。但是,我不知道满载是如何工作的。是不是很简单select * from table

我想知道当前通过满负荷运行的服务器是否有任何问题。

例如,由于 select 导致表锁定,因此发生死锁。

  1. 众所周知,CDC 以日志格式存储。

我不知道如何处理此日志以使其进入决赛桌。

最终目标是配置 CDC 日志,以便可以使用转换后的数据从 AWS athena 查询它。

RDS:MariaDB 版本 10.2.21

4

1 回答 1

0

我建议使用 aws 数据管道,因为您可以将数据导出为 csv 并将其存储到 s3

https://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-template-copyrdstos3.html

您可以根据您的要求安排工作:

https://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-object-schedule.html

于 2020-07-24T10:31:51.937 回答