在读取csv文件时禁用错误

时间:2019-01-14 05:06:22

标签: dask dask-distributed

dask数据框是否将错误错误行参数传递给pandas DataFrame类? 换句话说,这似乎不起作用,因为尝试运行groupby查询时出现错误。

df = dd.read_csv('s3://todel162xx/some.csv' , error_bad_lines=False, storage_options = {'anon':False})

csv文件中只有1或2行可能具有不同的数据类型。

1 个答案:

答案 0 :(得分:0)

是的,dask.dataframe.read_csv通过error_bad_lines关键字参数传递