我试图使用VoltDB的csvloader实用程序将数据库表加载到VoltDB数据库中。当我试图加载一个大小为5GB的表时,Voltdb占用内存的速度如此之快,以至于空闲RAM从55 GB变为200 MB,然后VoltDB进程就会被系统杀死。
这样做的原因是什么,以及建议VoltDB如何设置才能避免这种情况?
发布于 2016-10-25 18:15:40
您正在加载的表是否已分区?这是要检查的第一件事,因为如果在单个服务器上有默认的sitesperhost=8,并且表没有分区,那么在8个分区中的每个分区中都会有一个完整的表副本。如果对表进行了分区,则根据分区键列值的散列赋值将数据分布在分区之间。
如果它是分区的,并且仍然不能加载所有数据,那么接下来要查看的是模式。“规划指南”中有一些公式描述给定数据类型和索引的内存使用情况。VMC接口还有一个调整大小的工作表,它根据模式为您提供mins和maxes。您还可以发布要加载的表的定义,以及您在其上定义的任何索引,我们可以更多地解释它将使用的每行字节。
https://stackoverflow.com/questions/40235851
复制相似问题