roxmltree

roxmltree

Rust高效XML解析库 支持只读树结构

roxmltree是一个为Rust开发者设计的XML解析库。它提供只读XML树结构,支持命名空间解析、实体引用和属性值标准化。该库在性能和内存使用方面表现优异,适合处理大型XML文件。roxmltree采用Rust惯用API设计,无unsafe代码,适合需要高效安全处理XML数据的项目。

roxmltreeXML解析Rust库性能优化无状态解析Github开源项目

roxmltree

构建状态 Crates.io 文档 Rust 1.60+

XML文档表示为只读树。

// 通过id查找元素 let doc = roxmltree::Document::parse("<rect id='rect1'/>")?; let elem = doc.descendants().find(|n| n.attribute("id") == Some("rect1"))?; assert!(elem.has_tag_name("rect"));

为什么是只读的?

因为在某些情况下,您只需要从XML文档中检索一些数据。 对于这种情况,我们可以进行很多优化。

解析行为

遗憾的是,XML可以以多种不同的方式解析。roxmltree尝试模仿Python的lxml的行为。 有关更多详细信息,请参阅docs/parsing.md

替代方案

功能/库roxmltreelibxml2xmltreesxd-document
元素命名空间解析~<sup>1</sup>
属性命名空间解析
实体引用××
字符引用
属性值规范化
注释
处理指令
UTF-8 BOM××
非UTF-8输入
完整DTD支持
位置保留<sup>2</sup>
HTML支持
树修改
写入
unsafe
语言RustCRustRust
依赖项0-22
测试版本0.20.0Apple提供0.10.30.3.2
许可证MIT / Apache-2.0MITMITMIT

图例:

  • ✓ - 支持
  • × - 解析错误
  • ~ - 部分支持
  • 空白 - 不支持

注释:

  1. 无默认命名空间传播。
  2. roxmltree保留原始文档中所有节点和属性的位置, 因此如果需要,您可以轻松检索它。 有关详细信息,请参阅examples/print_pos.rs

还有elementtreetreexml库,但它们已经很长时间没有维护了。

性能

以下是将roxmltree与其他XML树库进行比较的一些基准测试。

test huge_roxmltree ... bench: 2,997,887 ns/iter (+/- 48,976) test huge_libxml2 ... bench: 6,850,666 ns/iter (+/- 306,180) test huge_sdx_document ... bench: 9,440,412 ns/iter (+/- 117,106) test huge_xmltree ... bench: 41,662,316 ns/iter (+/- 850,360)

测试 large_roxmltree ... 基准测试: 1,494,886 纳秒/迭代 (+/- 30,384) 测试 large_libxml2 ... 基准测试: 3,250,606 纳秒/迭代 (+/- 140,201) 测试 large_sdx_document ... 基准测试: 4,242,162 纳秒/迭代 (+/- 99,740) 测试 large_xmltree ... 基准测试: 13,980,228 纳秒/迭代 (+/- 229,363)

测试 medium_roxmltree ... 基准测试: 421,137 纳秒/迭代 (+/- 13,855) 测试 medium_libxml2 ... 基准测试: 950,984 纳秒/迭代 (+/- 34,099) 测试 medium_sdx_document ... 基准测试: 1,618,270 纳秒/迭代 (+/- 23,466) 测试 medium_xmltree ... 基准测试: 4,315,974 纳秒/迭代 (+/- 31,849)

测试 tiny_roxmltree ... 基准测试: 2,522 纳秒/迭代 (+/- 31) 测试 tiny_libxml2 ... 基准测试: 8,931 纳秒/迭代 (+/- 235) 测试 tiny_sdx_document ... 基准测试: 11,658 纳秒/迭代 (+/- 82) 测试 tiny_xmltree ... 基准测试: 20,215 纳秒/迭代 (+/- 303)

与流式XML解析器相比,roxmltree的速度略慢于quick-xml,但仍远快于xmlrs。 请注意,流式解析器通常不提供适当的字符串反转义、DTD解析和命名空间支持。

测试 huge_quick_xml ... 基准测试: 2,997,887 纳秒/迭代 (+/- 48,976) 测试 huge_roxmltree ... 基准测试: 3,147,424 纳秒/迭代 (+/- 49,153) 测试 huge_xmlrs ... 基准测试: 36,258,312 纳秒/迭代 (+/- 180,438)

测试 large_quick_xml ... 基准测试: 1,250,053 纳秒/迭代 (+/- 21,943) 测试 large_roxmltree ... 基准测试: 1,494,886 纳秒/迭代 (+/- 30,384) 测试 large_xmlrs ... 基准测试: 11,239,516 纳秒/迭代 (+/- 76,937)

测试 medium_quick_xml ... 基准测试: 206,232 纳秒/迭代 (+/- 2,157) 测试 medium_roxmltree ... 基准测试: 421,137 纳秒/迭代 (+/- 13,855) 测试 medium_xmlrs ... 基准测试: 3,975,916 纳秒/迭代 (+/- 44,967)

测试 tiny_quick_xml ... 基准测试: 2,233 纳秒/迭代 (+/- 70) 测试 tiny_roxmltree ... 基准测试: 2,522 纳秒/迭代 (+/- 31) 测试 tiny_xmlrs ... 基准测试: 17,155 纳秒/迭代 (+/- 429)

注意事项

基准测试是在Apple M1 Pro上进行的。 你可以通过在benches目录下运行cargo bench来自行尝试运行基准测试。

  • 由于所有库都有不同的XML支持,基准测试在某种程度上是无意义的。
  • 我们使用*[rust-libxml]包装器crate来对libxml2*进行基准测试。

内存开销

roxmltree尽量使用尽可能少的内存,以允许解析非常大(数GB)的XML文件。

峰值内存使用量并不直接与文件大小相关,而是与文件中的节点和属性数量有关。 有多少属性需要规范化(即分配)。 以及有多少文本节点需要预处理(即分配)。

roxmltree从不为元素和属性名称、处理指令和注释分配内存。

通过禁用positions功能,你可以为每个节点和属性节省8字节。

平均而言,开销大约是文件大小的6-8倍。 例如,我们1.1GB的样本XML在启用默认功能时内存峰值为7.6GB, 而在禁用positions时为6.8GB。

安全性

  • 本库不得出现panic。任何panic都应被视为严重bug并报告。
  • 本库禁止使用unsafe代码。

API

本库使用Rust的惯用API,基于迭代器。 如果你更熟悉浏览器/JS DOM API - 你可以查看tests/dom-api.rs来了解如何将其映射到Rust API上。

在此API的基础上,通过serde-roxmltree crate提供了对Serde数据模型的映射。

许可证

根据以下两种许可之一授权

由你选择。

贡献

除非你另有明确说明,否则你有意提交以包含在作品中的任何贡献,按照Apache-2.0许可证的定义,应按上述方式双重许可,不附加任何额外条款或条件。

编辑推荐精选

Vora

Vora

免费创建高清无水印Sora视频

Vora是一个免费创建高清无水印Sora视频的AI工具

Refly.AI

Refly.AI

最适合小白的AI自动化工作流平台

无需编码,轻松生成可复用、可变现的AI自动化工作流

酷表ChatExcel

酷表ChatExcel

大模型驱动的Excel数据处理工具

基于大模型交互的表格处理系统,允许用户通过对话方式完成数据整理和可视化分析。系统采用机器学习算法解析用户指令,自动执行排序、公式计算和数据透视等操作,支持多种文件格式导入导出。数据处理响应速度保持在0.8秒以内,支持超过100万行数据的即时分析。

AI工具使用教程AI营销产品酷表ChatExcelAI智能客服
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

热门AI工具生产力协作转型TraeAI IDE
AIWritePaper论文写作

AIWritePaper论文写作

AI论文写作指导平台

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

数据安全AI助手热门AI工具AI辅助写作AI论文工具论文写作智能生成大纲
博思AIPPT

博思AIPPT

AI一键生成PPT,就用博思AIPPT!

博思AIPPT,新一代的AI生成PPT平台,支持智能生成PPT、AI美化PPT、文本&链接生成PPT、导入Word/PDF/Markdown文档生成PPT等,内置海量精美PPT模板,涵盖商务、教育、科技等不同风格,同时针对每个页面提供多种版式,一键自适应切换,完美适配各种办公场景。

热门AI工具AI办公办公工具智能排版AI生成PPT博思AIPPT海量精品模板AI创作
潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

下拉加载更多