一般读取csv使用pandas就够用了,但是读取大型csv会比较慢。之前在学习R语言时用了fread和fwrite,读取和写入非常快,后来发现python上也有类似的包datatable
安装datatable(使用mamba):
mamba install conda-forge::datatable例子:
import datatable as dt
# 自动推断文件类型并快速加载
df = dt.fread("path/to/your/data.csv")
# Datatable -> Pandas
pandas_df_new = dt_frame.to_pandas()
评论区