0

0

Python lxml html.fromstring 解析HTML为XML树

星降

星降

发布时间:2026-03-03 09:47:32

|

377人浏览过

|

来源于php中文网

原创

根本原因是html.fromstring()默认按utf-8字节流解析,不自动探测编码或容错;输入为bytes时须确保utf-8编码,为str时需避免非法字符,且应优先检查bom和实际编码。

python lxml html.fromstring 解析html为xml树

为什么 html.fromstring() 有时解析出空树或报错

根本原因不是 HTML 写得“不对”,而是 html.fromstring() 默认把输入当作 UTF-8 字节流处理,但你传的可能是字符串(str)、带 BOM 的文件、或 GBK 编码的响应体。它不会自动探测编码,也不会 fallback 到浏览器式容错。

常见错误现象:AttributeError: 'NoneType' object has no attribute 'xpath'(根节点为 None),或解析后 .xpath('//div') 返回空列表,明明源码里有 <div>。 <ul> <li>如果输入是 <code>bytes,确保它是 UTF-8 编码;如果不是,先用对应编码解码成 str,再交给 html.fromstring()

  • 如果输入是 str(Python 3 下通常是 Unicode),lxml 会直接解析,但若字符串含非法字符(如未转义的 在文本中),可能截断或静默失败
  • 遇到乱码或解析异常,优先检查原始数据:用 print(repr(html_bytes[:100])) 看开头几个字节,确认有没有 \xef\xbb\xbf(UTF-8 BOM)或 \xff\xfe(UTF-16 LE)
  • html.fromstring()etree.fromstring() 选哪个

    二者底层都走 libxml2,但语义和默认行为不同:html.fromstring() 是 HTML 专用入口,内置了标签修复(比如自动补全 <table><tr><td>)、忽略声明、容忍自闭合错误;<code>etree.fromstring() 是 XML 解析器,遇到 <img alt="Python lxml html.fromstring 解析HTML为XML树" > 不闭合或属性没引号就直接抛 XMLSyntaxError

    使用场景很明确:只要源是网页 HTML(哪怕写得烂),必须用 html.fromstring();只有当你确定输入是严格 XML(比如 RSS、SOAP 响应),才用 etree.fromstring()

    MonkeyCode
    MonkeyCode

    企业级AI开发平台,全新的AI编程体验,让你的研发团队效率Max

    下载

    立即学习Python免费学习笔记(深入)”;

    • html.fromstring() 会把 <br><input> 这类 void 元素正确识别为单标签,而 etree.fromstring() 会要求写成 <br>
    • html.fromstring() 自动将文档编码声明(如 <meta charset="gbk">锛夌撼鍏ヨВ鐮佸弬鑰冿紝etree.fromstring() 瀹屽叏涓嶇湅杩欎釜
    • 鎬ц兘涓婂樊寮傚井涔庡叾寰

    相关文章

    HTML速学教程(入门课程)
    HTML速学教程(入门课程)

    HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

    下载

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

    热门AI工具

    更多
    DeepSeek
    DeepSeek

    幻方量化公司旗下的开源大模型平台

    豆包大模型
    豆包大模型

    字节跳动自主研发的一系列大型语言模型

    通义千问
    通义千问

    阿里巴巴推出的全能AI助手

    腾讯元宝
    腾讯元宝

    腾讯混元平台推出的AI助手

    文心一言
    文心一言

    文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

    讯飞写作
    讯飞写作

    基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

    即梦AI
    即梦AI

    一站式AI创作平台,免费AI图片和视频生成。

    ChatGPT
    ChatGPT

    最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

    相关专题

    更多
    python中print函数的用法
    python中print函数的用法

    python中print函数的语法是“print(value1, value2, ..., sep=' ', end=' ', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

    192

    2023.09.27

    python print用法与作用
    python print用法与作用

    本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

    17

    2026.02.03

    string转int
    string转int

    在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

    910

    2023.08.02

    pdf怎么转换成xml格式
    pdf怎么转换成xml格式

    将 pdf 转换为 xml 的方法:1. 使用在线转换器;2. 使用桌面软件(如 adobe acrobat、itext);3. 使用命令行工具(如 pdftoxml)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

    1938

    2024.04.01

    xml怎么变成word
    xml怎么变成word

    步骤:1. 导入 xml 文件;2. 选择 xml 结构;3. 映射 xml 元素到 word 元素;4. 生成 word 文档。提示:确保 xml 文件结构良好,并预览 word 文档以验证转换是否成功。想了解更多xml的相关内容,可以阅读本专题下面的文章。

    2116

    2024.08.01

    xml是什么格式的文件
    xml是什么格式的文件

    xml是一种纯文本格式的文件。xml指的是可扩展标记语言,标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。想了解更多相关的内容,可阅读本专题下面的相关文章。

    1143

    2024.11.28

    js 字符串转数组
    js 字符串转数组

    js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

    678

    2023.08.03

    js截取字符串的方法
    js截取字符串的方法

    js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

    219

    2023.09.04

    Golang 测试体系与代码质量保障:工程级可靠性建设
    Golang 测试体系与代码质量保障:工程级可靠性建设

    Go语言测试体系与代码质量保障聚焦于构建工程级可靠性系统。本专题深入解析Go的测试工具链(如go test)、单元测试、集成测试及端到端测试实践,结合代码覆盖率分析、静态代码扫描(如go vet)和动态分析工具,建立全链路质量监控机制。通过自动化测试框架、持续集成(CI)流水线配置及代码审查规范,实现测试用例管理、缺陷追踪与质量门禁控制,确保代码健壮性与可维护性,为高可靠性工程系统提供质量保障。

    64

    2026.02.28

    热门下载

    更多
    网站特效
    /
    网站源码
    /
    网站素材
    /
    前端模板

    精品课程

    更多
    相关推荐
    /
    热门推荐
    /
    最新课程
    最新Python教程 从入门到精通
    最新Python教程 从入门到精通

    共4课时 | 22.5万人学习

    Django 教程
    Django 教程

    共28课时 | 4.7万人学习

    SciPy 教程
    SciPy 教程

    共10课时 | 1.8万人学习

    关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
    php中文网:公益在线php培训,帮助PHP学习者快速成长!
    关注服务号 技术交流群
    PHP中文网订阅号
    每天精选资源文章推送

    Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号