我每行有1 TB的CSV格式的唯一数据（我可以根据需要更改格式）。>>
我想将数据上传到数据库并对其建立索引，以便快速检索要在网站上显示的数据。
我正在收集将来希望添加到数据库的其他数据。我希望新数据将包含重复的行（到数据库中已有的数据）。
什么是用于快速上载数据，删除重复行和“快速”
索引的最佳数据库？谢谢
我每行有1 TB的CSV格式的唯一数据（如有必要，我可以更改格式）。我想将数据上传到数据库并为其建立索引，以便快速检索要显示的数据...
有专门的数据库来处理此数据量，例如，您可以选择：
Oracle：您可以轻松使用建立索引的Oracle数据库，但需要获得许可我的SQL：这是开源数据库，您可以使用oracle数据库的备用方法另一个：如果您的数据具有与文档相关的信息，MangoDB可能会更糟糕