• 用DataSet.ReadXml读取无Scheme的XML提速方法.(转)


    单纯用DataSet的ReadXml方法读取XML对于小数据量来说效率很高,但是对大数据量的XML来说就有些力不从心了。
    比如,让DataSet读取一个16M的XML,能让你等到地老天荒。如果你的机器配置不高,那肯定死的很难看、很窝囊。
    咱不能见死不救不是,请往下看。

    题外话:如果XML来自DataSet,那么你是幸运的。你可以DataSet把架构信息带上,别因膨胀那么几k的数据就舍不得了。

    ReadXML缺省使用XmlReadMode.Auto方式读取,这就给大数据量留下了低效率的伏笔。
    因为如果XML没有Scheme,DataSet就会自己推算XML的结构,然后再加载,这就是低效的主要原因。
    让DataSet推算不让我们帮他算,因为DataSet已经提供了一个ReadXmlSchema方法。
    如下:

    Dim XMLText As String '保存了XML的文本
    Dim MyDs As New DataSet
    Dim MyTab As DataTable

    '加载架构
    MyDs.ReadXmlSchema(New IO.StringReader(XMLText))
    For Each MyTab In MyDs.Tables
    MyTab.BeginLoadData()
    Next


    然后再让DataSet加载数据。
    注意:因为前面我们一个帮他加载架构信息了,这里就可以让DataSet加载数据时忽略Schema。
    '加载数据
    MyDs.ReadXml(New IO.StringReader(XMLText), XmlReadMode.IgnoreSchema)
    For Each MyTab In MyDs.Tables
    MyTab.EndLoadData()
    Next

    Ok,这样就把数据快速的加载到DataSet了。经过实际测试,数据量越大效率比就越高。
     
     
    通常获得DataSet的XML的方法是用GetXml,确实方便。但是返回的结果已经把DataSet的架构信息抹掉了,剩下的是单纯的数据。
    DataSet还给我们留了一个WriteXml方法(感动ing,勿扰....),这个方法可以把DataSet的数据写到文件或流中。
    比如:
    Dim MS As New IO.MemoryStream
    DataSet.WriteXml(MS, XmlWriteMode.WriteSchema) '后面参数是关键,指明要带上架构信息。
    这样在MS这个流中就保存了带DataSet架构信息的全部数据。
  • 相关阅读:
    jzoj 6278. 2019.8.5【NOIP提高组A】跳房子
    2019.08.05【NOIP提高组】模拟 A 组 总结
    HTML笔记
    html中的锚点设置
    前端HTML
    数据库设计(第一范式,第二范式,第三范式)
    MySQL之锁、事务、优化、OLAP、OLTP
    MySQL数据备份与还原(mysqldump)
    MySQl创建用户和授权
    MySQL之索引原理与慢查询优化
  • 原文地址:https://www.cnblogs.com/friendwang1001/p/726484.html
Copyright © 2020-2023  润新知