位置: 编程技术 - 正文

详细解读Python中解析XML数据的方法(python 详细)

编辑:rootadmin

推荐整理分享详细解读Python中解析XML数据的方法(python 详细),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:python中&apos,python中&apos,python怎么理解,pythonn,python语言中,python语言中,python中&apos,python中的,内容如对您有帮助,希望把文章链接给更多的朋友!

Python可以使用 xml.etree.ElementTree 模块从简单的XML文档中提取数据。 为了演示,假设你想解析Planet Python上的RSS源。下面是相应的代码:

运行上面的代码,输出结果类似这样:

很显然,如果你想做进一步的处理,你需要替换 print() 语句来完成其他有趣的事。

在很多应用程序中处理XML编码格式的数据是很常见的。 不仅因为XML在Internet上面已经被广泛应用于数据交换, 同时它也是一种存储应用程序数据的常用格式(比如字处理,音乐库等)。 接下来的讨论会先假定读者已经对XML基础比较熟悉了。

在很多情况下,当使用XML来仅仅存储数据的时候,对应的文档结构非常紧凑并且直观。 例如,上面例子中的RSS订阅源类似于下面的格式:

xml.etree.ElementTree.parse() 函数解析整个XML文档并将其转换成一个文档对象。 然后,你就能使用 find() 、iterfind() 和 findtext() 等方法来搜索特定的XML元素了。 这些函数的参数就是某个指定的标签名,例如 channel/item 或 title 。

每次指定某个标签时,你需要遍历整个文档结构。每次搜索操作会从一个起始元素开始进行。 同样,每次操作所指定的标签名也是起始元素的相对路径。 例如,执行 doc.iterfind('channel/item') 来搜索所有在 channel 元素下面的 item 元素。 doc 代表文档的最顶层(也就是第一级的 rss 元素)。 然后接下来的调用 item.findtext() 会从已找到的 item 元素位置开始搜索。

ElementTree 模块中的每个元素有一些重要的属性和方法,在解析的时候非常有用。 tag 属性包含了标签的名字,text 属性包含了内部的文本,而 get() 方法能获取属性值。例如:

有一点要强调的是 xml.etree.ElementTree 并不是XML解析的唯一方法。 对于更高级的应用程序,你需要考虑使用 lxml 。 它使用了和ElementTree同样的编程接口,因此上面的例子同样也适用于lxml。 你只需要将刚开始的import语句换成 from lxml.etree import parse 就行了。 lxml 完全遵循XML标准,并且速度也非常快,同时还支持验证,XSLT,和XPath等特性。

增量式解析大型XML文件任何时候只要你遇到增量式的数据处理时,第一时间就应该想到迭代器和生成器。 下面是一个很简单的函数,只使用很少的内存就能增量式的处理一个大型XML文件:

详细解读Python中解析XML数据的方法(python 详细)

为了测试这个函数,你需要先有一个大型的XML文件。 通常你可以在政府网站或公共数据网站上找到这样的文件。 例如,你可以下载XML格式的芝加哥城市道路坑洼数据库。 在写这本书的时候,下载文件已经包含超过,行数据,编码格式类似于下面这样:

假设你想写一个脚本来按照坑洼报告数量排列邮编号码。你可以像这样做:

这个脚本唯一的问题是它会先将整个XML文件加载到内存中然后解析。 在我的机器上,为了运行这个程序需要用到MB左右的内存空间。 如果使用如下代码,程序只需要修改一点点:

结果是:这个版本的代码运行时只需要7MB的内存?大大节约了内存资源。

讨论这里技术会依赖 ElementTree 模块中的两个核心功能。 第一,iterparse() 方法允许对XML文档进行增量操作。 使用时,你需要提供文件名和一个包含下面一种或多种类型的事件列表: start , end, start-ns 和 end-ns 。 由 iterparse() 创建的迭代器会产生形如 (event, elem) 的元组, 其中 event 是上述事件列表中的某一个,而 elem 是相应的XML元素。例如:

start 事件在某个元素第一次被创建并且还没有被插入其他数据(如子元素)时被创建。 而 end 事件在某个元素已经完成时被创建。 尽管没有在例子中演示, start-ns 和 end-ns 事件被用来处理XML文档命名空间的声明。

这本节例子中, start 和 end 事件被用来管理元素和标签栈。 栈代表了文档被解析时的层次结构, 还被用来判断某个元素是否匹配传给函数 parse_and_remove() 的路径。 如果匹配,就利用 yield 语句向调用者返回这个元素。

在 yield 之后的下面这个语句才是使得程序占用极少内存的ElementTree的核心特性:

这个语句使得之前由 yield 产生的元素从它的父节点中删除掉。 假设已经没有其它的地方引用这个元素了,那么这个元素就被销毁并回收内存。

对节点的迭代式解析和删除的最终效果就是一个在文档上高效的增量式清扫过程。 文档树结构从始自终没被完整的创建过。尽管如此,还是能通过上述简单的方式来处理这个XML数据。

这种方案的主要缺陷就是它的运行性能了。 我自己测试的结果是,读取整个文档到内存中的版本的运行速度差不多是增量式处理版本的两倍快。 但是它却使用了超过后者倍的内存。 因此,如果你更关心内存使用量的话,那么增量式的版本完胜。

Python中将字典转换为XML以及相关的命名空间解析 尽管xml.etree.ElementTree库通常用来做解析工作,其实它也可以创建XML文档。例如,考虑如下这个函数:fromxml.etree.ElementTreeimportElementdefdict_to_xml(tag,d):'''Turna

简单介绍使用Python解析并修改XML文档的方法 问题你想读取一个XML文档,对它最一些修改,然后将结果写回XML文档。解决方案使用xml.etree.ElementTree模块可以很容易的处理这些任务。第一步是以通常

Python中基本的日期时间处理的学习教程 Python程序能用很多方式处理日期和时间。转换日期格式是一个常见的例行琐事。Python有一个time和calendar模组可以帮忙。什么是Tick?时间间隔是以秒为单

标签: python 详细

本文链接地址:https://www.jiuchutong.com/biancheng/377080.html 转载请保留说明!

上一篇:深入解析Python编程中JSON模块的使用(python解读)

下一篇:Python中将字典转换为XML以及相关的命名空间解析(python将字典转换成字符串)

  • 固定资产盘点折旧怎么算
  • 个体户每月开票超3万
  • 工会经费个人绩效计入缴费基数吗
  • 以前年度损益调整会计分录
  • 工商年报实缴出资额是实收资本吗
  • 借款利息收入所得税
  • 企业降低存货成本的途径和方法
  • 购买加油卡有优惠吗
  • 核算无形资产的过程中,使用的会计账户有
  • 农产品为什么价格低
  • 广告位的费用
  • 个体户进货需要发票吗?
  • 正在注销的公司微信收的款怎么追回
  • 苗木增值税发票税率
  • 年数总和折旧计算方法
  • 其他应收款在资产负债表中是负数
  • 收到股息红利免征增值税
  • 进口增值税 海关
  • 购进的货物用于赠送
  • 企业所得税和进项的关系
  • 收到个税返还手续费怎么开发票
  • 2018增值税暂行条例
  • 关闭通知横幅
  • 资产负债表中的货币资金怎么算
  • 住宿费和差旅费
  • 不动产租赁如何缴纳增值税
  • 电脑如何关闭屏幕还在工作
  • 外汇关闭时间
  • 营改增允许从销售额中扣
  • 什么是技术服务工程师
  • 增值税专用发票怎么开
  • 机器学习——感知机
  • mac datagrip
  • phpcms模块
  • 单位之间的争议由谁处理
  • 酒店业营业税税率
  • 跨年发票可以作为税前扣除的时限
  • 企业能否自行填开发票入账
  • php 用户
  • 火车头造型
  • 产品检测费计入成本吗
  • 一般纳税人按简易办法计税销售额
  • 附加税计税依据扣除留抵退税
  • sql server 2008怎么用
  • 开模具厂一年能挣多少钱
  • 借款利息税前扣除应当注意的三个问题
  • 车辆抵押贷款怎么办理
  • 汽修修理厂
  • 递延税款科目怎样使用
  • 亏损企业对外捐赠的税前扣除
  • 库存商品怎么计提坏账
  • 没收到发票也可以入账吗
  • 总资产利润率一般为多少
  • 年度汇算清缴缴税的会计分录
  • 支付上月采购货款
  • 贷款的融资担保费
  • 委托付款做账怎么做
  • 免税收入和征税收入怎么做账
  • 分期付款进项税额怎么算
  • 挂靠工程项目预交税金的会计分录如何做?
  • SQL Server Parameter Sniffing及其改进方法
  • MySQL5.7 windows二进制安装教程
  • 用SQL统计SQLServe表存储空间大小的代码
  • sql server怎么向表里添加数据
  • win10每次开机都假死机
  • windows7/vista/server(no slic)
  • win8管理员权限怎么打开
  • win10老是弹窗广告
  • windows7找不到无线
  • android canvas rotate
  • [置顶] [寒江孤叶丶的Cocos2d-x之旅_27]CocoStudio导出的LUA文件怎么使用?
  • python爬虫教程
  • ubuntu sudo apt-get install
  • android百分比布局
  • js arrayfrom
  • android开发和java开发区别
  • android 打包
  • 福建省个人所得税申报系统
  • 一般纳税人提供公共交通运输服务免征增值税
  • 上海税务举报邮箱号
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设