OracleBulkCopy内存泄漏(OutOfMemory异常)

时间:2015-05-07 18:39:52

标签: c# oracle memory-leaks bulkinsert sqlbulkcopy

以下是我用于将临时表dataTable中的数据批量复制到Oracle数据库中的destTable的代码。 dataTable有大约200万条记录。

using (OracleBulkCopy bulkCopy = new OracleBulkCopy(VMSDATAConnectionString))
            {
                try
                {
                    foreach (OracleBulkCopyColumnMapping columnMapping in columnMappings)
                        bulkCopy.ColumnMappings.Add(columnMapping);

                    bulkCopy.DestinationTableName = destTableName;
                    //bulkCopy.BatchSize = dataTable.Rows.Count;
                    //bulkCopy.BulkCopyTimeout = 100;                   
                    int defaultSize = 5000;
                    int.TryParse(ConfigurationManager.AppSettings["OracleBulkCopyBatchSize"], out defaultSize);
                    bulkCopy.BatchSize = defaultSize;
                    int timeOut = 100;
                    int.TryParse(ConfigurationManager.AppSettings["OracleBulkCopyTimeout"], out timeOut);
                    bulkCopy.BulkCopyTimeout = timeOut;
                    Console.WriteLine("Bulk insert from {0} to {1} started at: {2}\r\nBatchSize : {3}, BulkCopyTimeout : {4} ", dataTable.TableName, destTableName, DateTime.Now.ToString("HH:mm:ss"), bulkCopy.BatchSize.ToString(), bulkCopy.BulkCopyTimeout.ToString());
                    bulkCopy.WriteToServer(dataTable);
                    Console.WriteLine("Bulk insert from {0} to {1} finished at: {2}", dataTable.TableName, destTableName, DateTime.Now.ToString("HH:mm:ss"));
                }
                catch (Exception ex)
                {
                    Console.WriteLine("Error happened during bulk copy from {0} to {1}\r\nBatchSize : {2}, BulkCopyTimeout : {3}\r\n Error message {4}", dataTable.TableName, destTableName, bulkCopy.BatchSize.ToString(), bulkCopy.BulkCopyTimeout.ToString(), ex.ToString());
                    bulkCopy.Close();
                    bulkCopy.Dispose();
                }
            }

但它抛出以下异常: enter image description here

运行此数据加载过程的服务器肯定有足够的内存,看起来数据库服务器(linux)没有足够的内存。下面是数据库服务器内存屏幕截图: enter image description here

任何人都可以帮忙解决这个问题吗?感谢。

1 个答案:

答案 0 :(得分:4)

找到根本原因,exe以32位运行,并且它具有1.5G内存限制。需要更改目标平台并将Oracle.DataAccess.dll替换为64位版本。

还有一种替代解决方案:批量加载数据,因此不会超过1.5 G内存限制。

更新

“使用ORACLEBULKCOPY进行内存泄漏”:oracle批量拷贝有一些导致内存泄漏的错误,它发生在BatchSize小于数据表大小时。 需要修改BatchSize或将ODAC更新为更高版本。

参考:https://community.oracle.com/message/4593452#4593452