baseline - 我有包含10,000个条目的CSV数据.我将其保存为1个csv文件并立即加载它.
替代 - 我有10,000个条目的CSV数据.我将其保存为10,000个CSV文件并单独加载.
计算上大约多少效率低下.我对记忆问题并不十分感兴趣.替代方法的目的是因为我经常需要访问数据的子集,并且不希望必须读取整个数组.
我正在使用python.
编辑:如果需要,我可以使用其他文件格式.
Edit1:SQLite获胜.与我以前的工作相比,简单而有效.
python csv sqlite
csv ×1
python ×1
sqlite ×1