0

0

Python怎么解析HTML文件_读取本地HTML与BeautifulSoup

P粉602998670

P粉602998670

发布时间:2026-03-17 08:46:31

|

754人浏览过

|

来源于php中文网

原创

用with open("page.html", encoding="utf-8")读取文件后传给BeautifulSoup(f, "html.parser");find()返回单个元素或None,select()始终返回列表;调用.text前须判空,推荐getattr(elem, "text", "");.get_text()比.text更可控。

python怎么解析html文件_读取本地html与beautifulsoup

BeautifulSoup 读本地 HTML 文件的正确打开方式

别直接传文件路径给 BeautifulSoup(),它不认路径字符串。必须先用 Python 打开文件,读出内容,再喂给解析器。

  • open() 要加 encoding="utf-8",否则中文乱码很常见,尤其 Windows 下默认是 gbk
  • 推荐用 with open(...),避免文件句柄泄露
  • 解析器选 "html.parser" 就够用,不用额外装 lxmlhtml5lib,除非你明确需要它们的容错能力
with open("page.html", encoding="utf-8") as f:
    soup = BeautifulSoup(f, "html.parser")

find()select() 该选哪个?

看你是习惯写 CSS 选择器,还是更倾向方法链式调用。两者结果一致,但行为细节不同。

  • find() 只返回第一个匹配项(或 None),find_all() 返回列表;select() 总是返回列表,哪怕只匹配一个
  • select() 支持完整 CSS 语法,比如 div.content > p:first-childfind()attrs 参数写起来更啰嗦
  • 性能上差别极小,别为这个纠结;但注意 select() 不支持伪类如 :hover,它只是静态解析,不是浏览器

遇到 AttributeError: 'NoneType' object has no attribute 'text' 怎么办

这是最常踩的坑:你假设某个元素一定存在,但实际没找到,返回了 None,然后还去点 .text

  • 永远对 find()select_one() 的结果做存在性判断,别裸奔调用 .text
  • getattr(elem, "text", "") 或三元表达式 elem.text if elem else "" 更稳妥
  • 如果结构不稳定,优先用 select() 配合 list[0] if list else None,比嵌套 if 更清晰

HTML 编码、空格、换行怎么处理才干净

BeautifulSoup 默认会把连续空白压缩成单个空格,且自动解码 HTML 实体(如   → 空格),这通常是你想要的,但有时会误伤。

NameGPT名称生成器
NameGPT名称生成器

免费AI公司名称生成器,AI在线生成企业名称,注册公司名称起名大全。

下载

立即学习Python免费学习笔记(深入)”;

  • 取文本用 .get_text().text 更可控,它支持分隔符参数,比如 .get_text(strip=True, separator=" ")
  • 保留原始标签内换行?用 .prettify() 是格式化输出,不是读取逻辑;真要保留结构,得自己遍历 contents 并过滤 NavigableString
  • 遇到 <br> 被忽略?.get_text() 默认不把换行符当分隔符,得手动处理,比如先用 replace_with("\n")<br> 替换成换行符

真正麻烦的是嵌套不规范的 HTML,比如没闭合的 <p> 或混用的 <font> 标签——这时候别硬刚,先用 soup.prettify() 看一眼实际被解析成什么样,再决定 selector 怎么写。

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python爬虫获取数据的方法
Python爬虫获取数据的方法

Python爬虫可以通过请求库发送HTTP请求、解析库解析HTML、正则表达式提取数据,或使用数据抓取框架来获取数据。更多关于Python爬虫相关知识。详情阅读本专题下面的文章。php中文网欢迎大家前来学习。

293

2023.11.13

if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

847

2023.08.22

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

761

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

221

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1570

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

651

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

1269

2024.03.22

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

1206

2024.04.29

chatgpt使用指南
chatgpt使用指南

本专题整合了chatgpt使用教程、新手使用说明等等相关内容,阅读专题下面的文章了解更多详细内容。

0

2026.03.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 5.1万人学习

SciPy 教程
SciPy 教程

共10课时 | 2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号