我在这里使用熊猫来分析大数据文件:http://www.nielda.co.uk/betfair/data/它们的大小约为100兆.
来自csv的每个负载需要几秒钟,然后有更多时间来转换日期.
我已经尝试加载文件,将日期从字符串转换为日期时间,然后将它们重新保存为pickle文件.但加载它们也需要几秒钟.
我可以使用哪些快速方法从磁盘加载/保存数据?
python pandas
pandas ×1
python ×1