将文件上载到服务器会引发内存不足异常

时间:2014-04-17 19:43:16

标签: c# asp.net asp.net-web-api

我正在尝试使用asp.net web api实现文件上传系统,我遇到了问题。我试图将多部分表单数据放入内存流中,以便根据服务层实现将其写入磁盘或blob存储。问题是它适用于小文件,但我试图上传一个291 MB的文件,它正在抛出一个内存不足的例外。这是代码:

if (!Request.Content.IsMimeMultipartContent())
{
    Request.CreateErrorResponse(HttpStatusCode.UnsupportedMediaType, "Request must be multipart.");
}

var provider = new MultipartMemoryStreamProvider();

try
{
    await Request.Content.ReadAsMultipartAsync(provider);

    var infoPart = provider.Contents.Where(x => x.Headers.ContentDisposition.Name.Replace("\"", string.Empty) == "fileInfo").SingleOrDefault();
    var filePart = provider.Contents.Where(x => x.Headers.ContentDisposition.Name.Replace("\"", string.Empty) == "filePart" && x.Headers.ContentDisposition.FileName != null).Single();
    byte[] file = null;

    using (Stream stream = filePart.ReadAsStreamAsync().Result)
    {
        using (MemoryStream memory = new MemoryStream())
        {
            stream.CopyTo(memory);
            file = memory.ToArray();
        }
    }

    string fileContentType = filePart.Headers.ContentType.MediaType;

    FileDto result = _fileService.AddFileToResource(Variables);
    string uri = Url.Link("DefaultGet", new { id = result.ID });
    return Request.CreateResponse(HttpStatusCode.OK);

抛出错误的部分在

await Request.Content.ReadAsMultipartAsync(provider);

确切的错误是

  

将MIME多部分正文部分写入输出流时出错。

内部例外

  

抛出了类型'System.OutOfMemoryException'的异常。

我已尝试创建自定义BufferPolicySelector,如this post和其他许多地方的第二个答案所示,但这似乎没有任何帮助。

我还添加到了我的web.config:

<httpRuntime targetFramework="4.5" maxRequestLength="307200"/>

<security>
  <requestFiltering>
    <requestLimits maxAllowedContentLength="367001600"/>
  </requestFiltering>
</security>

3 个答案:

答案 0 :(得分:9)

一种解决方案是使用MultipartFormDataStreamProvider而不是MultipartMemoryStreamProvider来避免调用期间的内存不足异常

Request.Content.ReadAsMultipartAsync(..)

在读取大文件(> 100 MB)的MultiPart文件内容时,我在尝试使用MemoryStreamProvider时遇到了类似的问题。对我有用的工作是使用MultipartFormDataStreamProvider。在ReadAsMultipartAsync调用期间,该文件将写入磁盘,如果在内存中需要,可以稍后重新加载。

以下是一个例子:

Sending HTML Form Data in Web API: File Upload and Multipart MIME

    string root = HttpContext.Current.Server.MapPath("~/App_Data");
    var provider = new MultipartFormDataStreamProvider(root);

    try
    {
        // Read the form data.
        await Request.Content.ReadAsMultipartAsync(provider);

        // This illustrates how to get the file names.
        foreach (MultipartFileData file in provider.FileData)
        {
            Trace.WriteLine(file.Headers.ContentDisposition.FileName);
            Trace.WriteLine("Server file path: " + file.LocalFileName);
        }
        return Request.CreateResponse(HttpStatusCode.OK);
    }
    catch(...)

答案 1 :(得分:0)

检查webconfig的文件上传限制

<system.webServer>
        <security>
            <requestFiltering>
                <requestLimits maxAllowedContentLength="524288000"/>
            </requestFiltering>
        </security>
</system.webServer>

来自OP编辑:

<httpRuntime targetFramework="4.5" maxRequestLength="307200"/>

maxRequestLength在Kb中 - 这是缓冲阈值,您要求300MB缓冲区 - 可能不好。把它设置得更低

答案 2 :(得分:-1)

验证服务器上文件夹的权限。

或者

将httpRuntime maxRequestLength放在web.config中,例如:

<httpRuntime maxRequestLength="5242880" />