处理CSV文件数据时内存不足

时间:2018-12-20 13:42:32

标签: python numpy tensorflow

在Tensorflow中使用CNN文本分类处理200k文本数据时,传递给numpy.array(out_raw)时会消耗我8GB RAM的100%。输出原始数据形状为204177x22000。我尝试批量处理数据,但是没有用。

如果我需要增加RAM大小,请帮助我制定公式。有什么方法可以处理此问题陈述?

0 个答案:

没有答案