需要有关perl内存使用的建议

Question

我不是perl的新手,但我无法解决这个问题.

这是我的问题陈述:

我正在使用Activestate perl 5.12 32位.我希望一次在内存中保留一些32 x 8MB的双重数组.不幸的是,在这种情况下我得到了"内存不足"的错误.例如,下面的代码将导致内存不足.

my $aref1 = [(.25) x (8*1024*1024)];
my $aref2 = [(.25) x (8*1024*1024)];
my $aref3 = [(.25) x (8*1024*1024)];
my $aref4 = [(.25) x (8*1024*1024)];
my $aref5 = [(.25) x (8*1024*1024)];
my $aref6 = [(.25) x (8*1024*1024)];
my $aref7 = [(.25) x (8*1024*1024)];
my $aref8 = [(.25) x (8*1024*1024)];
my $aref9 = [(.25) x (8*1024*1024)];
my $aref10 = [(.25) x (8*1024*1024)];

有没有办法有效地处理它？

注意:在任何情况下,都需要在任何执行时尽快访问数组(因为用户不能等待太久)

我试过的选项:

1. DBM ::深 - 需要更多时间
2. PDL - 为32 x 8MB双倍数组提供"内存不足"错误

等待您宝贵的建议!

Answer 1

32个数组*8个Mi-double/array*8个字节/ double = 2个GiB.

Windows上的32位进程只有2GiB的可用地址空间.您的原始数据将占用所有可用的地址空间,不会留下数据结构的开销,perl程序和其他变量.它适合内存的唯一方法是切换到64位Perl.否则,您将不得不面对必然较慢的解决方案.