问大量数值数据的数据库存储需求与管理

EN

我试图弄清楚如何管理和服务大量的数字数据。不确定SQL数据库是正确的方法。设想如下：

• 10000组时间序列数据每小时收集
• 5浮点值每组
• 价值约5000小时收集的

数据

这就给了我大约2.5亿的总价值。我需要通过设置ID和时间来查询这组数据。如果可能的话，也可以由一个或两个值本身过滤。我也在不断地添加这些数据。

这似乎是很多数据。假设每个值为4个字节，则为1TB。我不知道SQL数据库的一般“开销乘数”是什么。假设是2，那就是2TB的磁盘空间。

处理这些数据的好方法是什么？我可以看到一些选择：

带有ID索引的

• 单PostgreSQL表，time
• 单SQLite表--这看起来速度慢得令人难以忍受--每组都有一个SQLite文件--这里面有很多.sqlite文件，比如MongoDB？我甚至不知道这是怎么回事.

感谢那些曾经这样做过的人的评论。