什么是从AWS S3中的更改日志（数据湖）重新创建关系数据库的最佳方法？

Question

我已将变更日志（包含有关数据的数据的数据）从非关系式无模式数据表存储到S3。现在我想要一些结构化的关系数据库来查询所有数据。所以我需要从S3创建一个数据库。现在，我对于使用其他S3还是使用某些传统数据库该怎么办感到困惑！

Answer 1

您可以在数据上创建粘合目录，并使用无服务器的Athena对其进行查询。这样，您就不必使用任何rdbms，并且可以在任何需要的时间查询数据，将文件保存在s3中。

这也将具有成本效益。另外，如果您只想运行过滤查询，一个更好的选择是对日志数据运行s3-select，并相信它非常快速且经济高效。