抓取网页，提取为干净、可读的纯文本，并摘要生成适合智能体使用的 Markdown 格式内容。面向研究助理的基础工具，无需浏览器。
WebClip 保存和摘要网页
功能概述
WebClip 保存和摘要网页是一项面向实际任务的技能，主要用于页面, 条状以清理可读文本, 归纳为代理已备标记；研究助理基础；
核心要点
- 不需要浏览器。
- 它将相关步骤、工具调用和结果整理方式集中到统一流程中，帮助使用者更快完成目标并减少重复操作。
- 使用时应结合输入条件选择合适的执行方式，核对必要参数、依赖环境与输出内容，并按原始要求处理异常情况。
使用与执行
该技能适合需要稳定复用相关能力的场景，可作为自动化工作流的一部分，也便于后续检查、调整和扩展。从功能定位来看，该技能强调把分散的操作要求整理成清晰、可复用的处理流程，使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数，再依据技能说明逐步执行；
结果检查与注意事项
若输入条件不完整，应先补齐信息或采用保守配置，避免因错误假设导致结果偏离需求。执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期，并对异常提示、缺失字段和边界情况进行处理；涉及批量任务时，还应保存进度，避免中断后重复操作。
WebClip：保存并摘要网页内容
抓取网页，提取干净可读的纯文本，并生成适用于智能体（agent）的 Markdown 格式摘要。是研究助理的核心基础能力。无需浏览器。
支持抓取任意网页，自动过滤冗余内容，提取结构清晰、语义完整的正文文本，并可选执行摘要处理。特别适合各类研究型任务。
使用方法
const { WebClip } = require('./src/web-clip');
const clip = new WebClip();
// 抓取并清洗
const page = await clip.fetch('https://example.com/article');
console.log(page.title);
console.log(page.text); // 纯净文本，不含 HTML
console.log(page.markdown); // 格式化后的 Markdown
// 抓取并摘要
const summary = await clip.summarize('https://example.com/article', {
maxLength: 200,
model: 'llama3.1:8b'
});
功能特性
- HTML 清洗 — 自动移除脚本、样式表、导航栏、广告及页脚等干扰元素
- 可读性内容提取 — 自动识别并提取页面主体内容
- Markdown 转换 — 完整保留标题、列表、链接、代码块等格式结构
- 批量抓取 — 支持并发处理多个 URL
- 缓存机制 — 避免重复抓取已处理过的网页
- 离线归档 — 将网页保存为本地 Markdown 文件
输出格式
| 格式 | 适用场景 |
|---|---|
.text |
供智能体上下文使用的原始纯净文本 |
.markdown |
便于阅读或长期存储的结构化格式 |
.summary |
压缩版摘要（需指定模型） |
.metadata |
元信息：标题、作者、发布日期、字数统计等 |
零依赖
仅使用 Node.js 内置的 https 模块。不依赖 Puppeteer，也不需要无头浏览器。
⚠️ 免责声明
本软件按“现状”（AS IS）提供，不附带任何形式的明示或暗示担保。
使用风险完全由您自行承担。
- 作者不对因本软件的使用或误用所导致的任何损害、损失或后果承担责任，包括但不限于经济损失、数据丢失、安全漏洞、业务中断，以及任何间接或衍生性损害。
- 本软件不构成财务、法律、交易或专业建议。
- 用户须自行评估本软件是否适用于其具体使用场景、运行环境及风险承受能力。
- 不保证本软件在准确性、可靠性、完整性或特定用途适用性方面的表现。
- 作者不对第三方在获取本软件后进行的修改、再分发或二次使用承担任何责任。
通过下载、安装或使用本软件，即视为您已完整阅读本免责声明，并同意完全自行承担使用风险。
数据免责声明：本软件仅在您的本地系统中处理与存储数据。作者不对因软件缺陷、系统故障或用户操作失误所引发的数据丢失、损坏或未授权访问承担责任。请务必对重要数据维持独立备份。除非用户显式配置，本软件不会对外传输任何数据。
支持与相关链接
| 🐛 问题反馈（Bug Reports） | TheShadowyRose@proton.me |
| ☕ Ko-fi 支持 | ko-fi.com/theshadowrose |
| 🛒 Gumroad 商店 | shadowyrose.gumroad.com |
| @TheShadowyRose | |
| 🐙 GitHub | github.com/TheShadowRose |
| 🧠 PromptBase | promptbase.com/profile/shadowrose |
基于 OpenClaw 构建 — 感谢您让这一切成为可能。
🛠️ 需要定制化开发？ 提供定制化的 OpenClaw 智能体与技能开发服务，起价 $500。只要您能描述需求，我就能为您实现 → 在 Fiverr 上雇佣我
热门AI工具
相关专题
Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章，帮助读者完成上线流程。
0
2026.10.28
Vite搭配Vue.js专题汇集创建Vue 3项目、配置开发环境、路径别名、Vue插件、代理、多环境构建与调试的已审核文章，帮助读者完成从初始化到日常开发的配置。
0
2026.10.28
Vite项目目录专题汇集入口文件、src源码、public静态资源、路径别名、项目根目录和构建输出目录相关的已审核文章，帮助读者理解各文件夹的用途与引用方式。
0
2026.10.28
本专题介绍Gradle插件开发的基本流程，涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法，帮助你理解插件如何组织构建逻辑，减少多个项目之间的重复配置。
0
2026.10.22
本专题介绍Gradle Wrapper的基本作用，涵盖文件组成、生成方法、版本配置和任务调用，帮助你理解项目如何使用指定的Gradle版本，减少不同开发环境带来的构建差异。
0
2026.10.22
本专题整理Golangci-lint常用Linters的用途与配置方法，覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查，帮助项目合理选规则。
0
2026.10.22
本专题介绍Gradle Java项目构建方法，涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查，帮助你理解各阶段的任务关系，逐步完成项目构建。
0
2026.10.22
本专题汇总PHP常见时间戳漏洞，包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等，并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案，帮助开发者快速排查和加固时间相关代码。
0
2026.10.22
本专题聚焦Golangci-lint YAML配置文件，讲清运行参数、规则启停、目录排除、问题过滤及严重级别设置，便于团队统一检查标准。
0
2026.10.22
热门下载
相关下载
精品课程
共6课时 | 12.1万人学习
共79课时 | 161.6万人学习
共6课时 | 54.7万人学习
