如何根据字节大小拆分pandas数据帧

时间:2017-06-22 23:49:31

标签: python python-2.7 pandas amazon-redshift

我想将大型pandas DataFrame中的数据插入到Redshift中。但是,当我尝试执行insert语句时,出现以下错误:

  

错误:声明太大了。语句大小:152681090字节。   允许的最大值:16777216字节

为了解决这个问题,我想将数据帧拆分为允许大小的块,并为每个块执行单独的insert语句。我究竟如何将数据帧划分为16777216字节限制的行块?

如果那是不可能的,还有其他方法可以将数据从这么大的数据帧插入到Redshift中吗?

谢谢!

0 个答案:

没有答案