讲师中心 微信公众号
AI工具推荐 视频效率加速

如何从HTML结构中递归提取文本

千雪同学_8817

千雪同学_8817

发布时间:2026-10-29 06:20:53

|

729人浏览过

|

来源于php中文网

原创

textContent不能直接满足递归提取需求,因为它会包含script/style/注释内容,且无法获取表单控件的实时输入值(只返回静态value属性),必须用childNodes遍历并按节点类型分别处理value或nodeValue。

如何从html结构中递归提取文本

为什么 textContent 不能直接满足递归提取需求

textContent 确实能安全提取单个元素内所有后代文本,但它会把 <script></script>、<style></style>、注释节点里的内容也一并拉进来——而这些通常不是你想要的“可见文本”。更关键的是,它对表单控件的实时值(比如用户刚在 <input> 里输入的字)完全无感,只返回 HTML 中写死的 value 属性值,不是 DOM 当前状态。

所以,真要“递归提取且覆盖动态内容”,就不能只靠一层 textContent,得自己控制遍历粒度和节点类型判断逻辑。

用 childNodes 遍历 + 类型判断是唯一可靠路径

必须用 childNodes,不是 children。因为 children 只返回元素节点,会跳过纯文本节点(比如 <div>hello</div> 中的 "hello" 就是 TEXT_NODE),导致内容丢失。

  • 遇到 Node.ELEMENT_NODE:先检查是否有 value 属性(覆盖 input、textarea、select、带 contenteditable 的元素),有就取 node.value;否则退到 node.textContent
  • 遇到 Node.TEXT_NODE:直接取 node.nodeValue,注意可能为空字符串或全是空白
  • 跳过 Node.COMMENT_NODE、Node.PROCESSING_INSTRUCTION_NODE 等无关类型
  • 递归调用自身处理每个符合条件的子节点,不依赖深度限制

get_text() 在 BeautifulSoup 中的 separator 和 strip 怎么选

Python 用户常卡在 get_text() 的分隔行为上。默认 separator='' 会让相邻文本“粘连”,比如 <p>Hello</p><div class="aritcle_card flexRow"> <div class="artcardd flexRow"> <a class="aritcle_card_img" href="/xiazai/skill10246" title="HTML Text Extract"><img src="https://img.php.cn/upload/skill/001/246/273/6adaf20dee630206.jpg" alt="HTML Text Extract" ></a> <div class="aritcle_card_info flexColumn"> <a href="/xiazai/skill10246" title="HTML Text Extract">HTML Text Extract</a> <p>从HTML页面(URL、文件或标准输入)中提取主体内容文本,去除导航、页脚、广告和模板文本。可直接传递给readability_check或其他文本工具。</p> </div> <a href="/xiazai/skill10246" title="HTML Text Extract" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a> </div> </div> <p><span>立即学习</span>“<a href="https://pan.quark.cn/s/cb6835dc7db1" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">前端免费学习笔记(深入)</a>”;</p> <p>World</p> 变成 "HelloWorld",而不是 "Hello World"。

  • 设 separator=' ' 最常用,但注意它会在每对节点间都加空格,可能导致首尾或中间多余空格
  • strip=True 会清理每段文本的首尾空白,但不会合并中间连续空白;如需彻底扁平化,后续补 .replace(/\s+/g, ' ').trim()(JS)或 re.sub(r'\s+', ' ', text).strip()(Python)
  • 别用 types 过滤文本节点来“提纯”——它无法区分正常文本和脚本注释里的字符串,容易误伤

高频调用时字符串拼接性能陷阱

循环里用 += 拼长文本,在 JS 或 Python 中都是 O(n²) 行为。尤其处理大 DOM 树或批量 HTML 文件时,延迟明显。

  • JS 推荐改用 Array.push() 收集,最后 .join('');避免在每次迭代中重新分配字符串内存
  • Python 用 get_text() 本身已内部优化,但若手动递归,也建议用 list.append() + ''.join()
  • Go 的 go.net/html 库必须手动遍历 FirstChild/NextSibling 链表,同样应累积到 []string 再 join,而非反复 +=

真正麻烦的从来不是“能不能拿到文本”,而是“拿到的是否包含用户此刻看到/输入的内容,又是否剔除了不该出现的噪音”。漏掉一个 Node.TEXT_NODE 或错判一次 value 存在性,搜索就会失焦。

相关文章

HTML速学教程(入门课程)
HTML速学教程(入门课程)

HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

6755

2023.06.14

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

3752

2023.06.21

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

3430

2023.07.31

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

3439

2023.08.01

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

5059

2023.08.11

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

3381

2023.08.11

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

3189

2023.08.31

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

2788

2023.09.01

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

40

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
极客学院ASP.NET视频教程
极客学院ASP.NET视频教程

共90课时 | 24.5万人学习

GDB 17.2 官方文档集合
GDB 17.2 官方文档集合

共0课时 | 0人学习

Bootstrap 入门安装配置
Bootstrap 入门安装配置

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn