小编use*_*834的帖子

加载一个巨大的Python Pickle字典

我通过pickle.dump()生成了一个大小约为5GB的文件.加载此文件大约需要半天时间,大约需要50GM RAM.我的问题是,是否可以通过单独访问(一次一个)而不是将其全部加载到内存中来读取此文件,或者如果您对如何访问此类文件中的数据有任何其他建议.

非常感谢.

python pickle

5
推荐指数
1
解决办法
2045
查看次数

标签 统计

pickle ×1

python ×1