CSV无可厚非的是一种良好的通用文件存储方式,几乎任何一款工具或者编程语言都能对其进行读写,但是当文件特别大的时候,CSV这种存储方式就会变得十分缓慢且低效.本文将介绍几种在Python中能够代替CSV这种格式的其他文件格式,并对比每种文件存储的时间与大小. 先说结论,parquet是最好的文件存储格式,具体对比见下文. 生成随机数据 导入依赖 import random import string import pickle # 以下需要自行安装 import numpy as np impo…