小编ift*_*ekm的帖子

MemoryError:无法为形状为 (725000, 277, 76) 和数据类型 float64 的数组分配 30.4 GiB

它给出了内存错误,但内存容量从未达到。我在 SSH 上有 60 GB 的内存,完整的数据集处理消耗了 30 GB,我正在尝试用 k 倍训练自动编码器。如果没有 k 倍,训练效果很好。原始数据集包含 hdf5 中的 250,000 条数据。对于 K-fold,如果我使用的总数据少于 100000,它就可以工作。我已经将其转换为 float32 但仍然不起作用。我也尝试过 echo 1 但会自动终止 python 程序

memory-management out-of-memory hdf5 python-3.x k-fold

10
推荐指数
1
解决办法
6万
查看次数