将XML加载到XDocument的最快方法是什么?

时间:2012-12-22 07:12:47

标签: c# .net xml linq-to-xml

使用XDocument创建新的XDocument.Load时,它是打开XML文件并保留本地副本,还是连续从硬盘驱动器中读取文档?如果它连续读取,是否有更快的方法来解析XML?

XDocument x = XDocument.Load("file.xml");

3 个答案:

答案 0 :(得分:10)

需要考虑几项措施:

  1. 线性遍历速度(例如读取/加载)
  2. 按需查询速度
  3. 要回答当前的问题: XDocument使用XmlReader通过读取每个元素并创建相应的XElement实例将文档加载到内存中(请参阅代码下面)。因此,它应该非常快(对于大多数用途而言足够快),但在解析大型文档时可能会占用大量内存。

    如果您的需求仅限于可以在不将文档保留在内存中的情况下完成,那么原始XmlReader是遍历的绝佳选择。它将胜过其他方法,因为没有创建重要结构,也没有与其他节点相关联(例如,链接父节点和子节点)。但是,按需查询能力几乎不存在;您可以对每个节点中找到的值做出反应,但不能作为整体查询文档。如果你需要第二次查看文档,你必须再次遍历整个文档。

    相比之下,XDocument将需要更长的时间来遍历,因为它实例化新对象并执行基本的结构任务。它还会消耗与源大小成比例的内存。为了换取这些权衡,您将获得出色的查询能力。

    可以将方法组合为mentioned by Jon Skeet并在此处显示:Streaming Into LINQ to XML Using C# Custom Iterators and XmlReader

    XDocument Load()

    的来源
    public static XDocument Load(Stream stream, LoadOptions options)
    {
        XmlReaderSettings xmlReaderSettings = XNode.GetXmlReaderSettings(options);
        XDocument result;
        using (XmlReader xmlReader = XmlReader.Create(stream, xmlReaderSettings))
        {
            result = XDocument.Load(xmlReader, options);
        }
        return result;
    }
    
    // which calls...
    
    public static XDocument Load(XmlReader reader, LoadOptions options)
    {
        if (reader == null)
        {
            throw new ArgumentNullException("reader");
        }
        if (reader.ReadState == ReadState.Initial)
        {
            reader.Read();
        }
        XDocument xDocument = new XDocument();
        if ((options & LoadOptions.SetBaseUri) != LoadOptions.None)
        {
            string baseURI = reader.BaseURI;
            if (baseURI != null && baseURI.Length != 0)
            {
                xDocument.SetBaseUri(baseURI);
            }
        }
        if ((options & LoadOptions.SetLineInfo) != LoadOptions.None)
        {
            IXmlLineInfo xmlLineInfo = reader as IXmlLineInfo;
            if (xmlLineInfo != null && xmlLineInfo.HasLineInfo())
            {
                xDocument.SetLineInfo(xmlLineInfo.LineNumber, xmlLineInfo.LinePosition);
            }
        }
        if (reader.NodeType == XmlNodeType.XmlDeclaration)
        {
            xDocument.Declaration = new XDeclaration(reader);
        }
        xDocument.ReadContentFrom(reader, options);
        if (!reader.EOF)
        {
            throw new InvalidOperationException(Res.GetString("InvalidOperation_ExpectedEndOfFile"));
        }
        if (xDocument.Root == null)
        {
            throw new InvalidOperationException(Res.GetString("InvalidOperation_MissingRoot"));
        }
        return xDocument;
    }
    
    // which calls...
    
    internal void ReadContentFrom(XmlReader r, LoadOptions o)
    {
        if ((o & (LoadOptions.SetBaseUri | LoadOptions.SetLineInfo)) == LoadOptions.None)
        {
            this.ReadContentFrom(r);
            return;
        }
        if (r.ReadState != ReadState.Interactive)
        {
            throw new InvalidOperationException(Res.GetString("InvalidOperation_ExpectedInteractive"));
        }
        XContainer xContainer = this;
        XNode xNode = null;
        NamespaceCache namespaceCache = default(NamespaceCache);
        NamespaceCache namespaceCache2 = default(NamespaceCache);
        string text = ((o & LoadOptions.SetBaseUri) != LoadOptions.None) ? r.BaseURI : null;
        IXmlLineInfo xmlLineInfo = ((o & LoadOptions.SetLineInfo) != LoadOptions.None) ? (r as IXmlLineInfo) : null;
        while (true)
        {
            string baseURI = r.BaseURI;
            switch (r.NodeType)
            {
            case XmlNodeType.Element:
            {
                XElement xElement = new XElement(namespaceCache.Get(r.NamespaceURI).GetName(r.LocalName));
                if (text != null && text != baseURI)
                {
                    xElement.SetBaseUri(baseURI);
                }
                if (xmlLineInfo != null && xmlLineInfo.HasLineInfo())
                {
                    xElement.SetLineInfo(xmlLineInfo.LineNumber, xmlLineInfo.LinePosition);
                }
                if (r.MoveToFirstAttribute())
                {
                    do
                    {
                        XAttribute xAttribute = new XAttribute(namespaceCache2.Get((r.Prefix.Length == 0) ? string.Empty : r.NamespaceURI).GetName(r.LocalName), r.Value);
                        if (xmlLineInfo != null && xmlLineInfo.HasLineInfo())
                        {
                            xAttribute.SetLineInfo(xmlLineInfo.LineNumber, xmlLineInfo.LinePosition);
                        }
                        xElement.AppendAttributeSkipNotify(xAttribute);
                    }
                    while (r.MoveToNextAttribute());
                    r.MoveToElement();
                }
                xContainer.AddNodeSkipNotify(xElement);
                if (r.IsEmptyElement)
                {
                    goto IL_30A;
                }
                xContainer = xElement;
                if (text != null)
                {
                    text = baseURI;
                    goto IL_30A;
                }
                goto IL_30A;
            }
            case XmlNodeType.Text:
            case XmlNodeType.Whitespace:
            case XmlNodeType.SignificantWhitespace:
                if ((text != null && text != baseURI) || (xmlLineInfo != null && xmlLineInfo.HasLineInfo()))
                {
                    xNode = new XText(r.Value);
                    goto IL_30A;
                }
                xContainer.AddStringSkipNotify(r.Value);
                goto IL_30A;
            case XmlNodeType.CDATA:
                xNode = new XCData(r.Value);
                goto IL_30A;
            case XmlNodeType.EntityReference:
                if (!r.CanResolveEntity)
                {
                    goto Block_25;
                }
                r.ResolveEntity();
                goto IL_30A;
            case XmlNodeType.ProcessingInstruction:
                xNode = new XProcessingInstruction(r.Name, r.Value);
                goto IL_30A;
            case XmlNodeType.Comment:
                xNode = new XComment(r.Value);
                goto IL_30A;
            case XmlNodeType.DocumentType:
                xNode = new XDocumentType(r.LocalName, r.GetAttribute("PUBLIC"), r.GetAttribute("SYSTEM"), r.Value, r.DtdInfo);
                goto IL_30A;
            case XmlNodeType.EndElement:
            {
                if (xContainer.content == null)
                {
                    xContainer.content = string.Empty;
                }
                XElement xElement2 = xContainer as XElement;
                if (xElement2 != null && xmlLineInfo != null && xmlLineInfo.HasLineInfo())
                {
                    xElement2.SetEndElementLineInfo(xmlLineInfo.LineNumber, xmlLineInfo.LinePosition);
                }
                if (xContainer == this)
                {
                    return;
                }
                if (text != null && xContainer.HasBaseUri)
                {
                    text = xContainer.parent.BaseUri;
                }
                xContainer = xContainer.parent;
                goto IL_30A;
            }
            case XmlNodeType.EndEntity:
                goto IL_30A;
            }
            break;
            IL_30A:
            if (xNode != null)
            {
                if (text != null && text != baseURI)
                {
                    xNode.SetBaseUri(baseURI);
                }
                if (xmlLineInfo != null && xmlLineInfo.HasLineInfo())
                {
                    xNode.SetLineInfo(xmlLineInfo.LineNumber, xmlLineInfo.LinePosition);
                }
                xContainer.AddNodeSkipNotify(xNode);
                xNode = null;
            }
            if (!r.Read())
            {
                return;
            }
        }
        goto IL_2E1;
        Block_25:
        throw new InvalidOperationException(Res.GetString("InvalidOperation_UnresolvedEntityReference"));
        IL_2E1:
        throw new InvalidOperationException(Res.GetString("InvalidOperation_UnexpectedNodeType", new object[]
        {
            r.NodeType
        }));
    }
    

答案 1 :(得分:6)

当您调用Load()然后将文档的本地实例保留在内存中时,它将解析传入的流(无论是来自文件还是字符串无关紧要)。由于源可以是任何东西(可以是NetworkStream,DataReader,用户输入的字符串),它无法返回并尝试再次读取数据,因为它不知道它的状态(流被关闭等) )。

另一方面,如果你真的想要速度,XDocument不是紧固件(尽管它更容易使用),因为它需要首先解析文档然后将其保留在内存中。如果使用System.Xml.XmlReader方法处理非常大的文档通常会更快,因为它可以将文档作为流读取,并且不需要保留除当前元素之外的任何内容。这个benchmark显示了一些有趣的数据。

答案 2 :(得分:1)

我不认为它会不断读取; XDocument.Load方法的优点在于它使用XmlReader将XML读入XML树。而且从现在开始你刚刚创建了一棵树,它很可能作为树存储在你的记忆中,它不再经常读取文档。它操纵树,因为它是一棵树,所以你所有的阅读和修改都会快得多。虽然它没有实现IDisposable,但会自动处理。