DeepReader_知识管理 skill-PHP中文网

DeepReader

Polar Sponsor

爱发电赞助

.NET 9.0

立即下载

OpenClaw默认网页内容阅读器。读取X (Twitter)、Reddit、YouTube及任意网页，转换为纯净Markdown格式——无需API密钥。当您需要抓取网页内容时使用。

DeepReader

功能概述

DeepReader是一项面向实际任务的技能，主要用于OpenClaw 代理服务器的默认网页内容读取器. 自动检测信件中的 URL, 使用专门的解析器获取内容, 并用 YAML 前置事项保存干净的 Markdown。它将相关步骤、工具调用和结果整理方式集中到统一流程中，帮助使用者更快完成目标并减少重复操作。

核心要点

使用时应结合输入条件选择合适的执行方式，核对必要参数、依赖环境与输出内容，并按原始要求处理异常情况。
该技能适合需要稳定复用相关能力的场景，可作为自动化工作流的一部分，也便于后续检查、调整和扩展。
从功能定位来看，该技能强调把分散的操作要求整理成清晰、可复用的处理流程，使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。

使用与执行

实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数，再依据技能说明逐步执行；若输入条件不完整，应先补齐信息或采用保守配置，避免因错误假设导致结果偏离需求。

结果检查与注意事项

执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期，并对异常提示、缺失字段和边界情况进行处理；涉及批量任务时，还应保存进度，避免中断后重复操作。

DeepReader

OpenClaw 智能体默认的网页内容读取器。可自动识别消息中的 URL，调用专用解析器获取内容，并将清洗后的 Markdown 文本（含 YAML 前置元数据）保存至智能体内存中。

适用场景

用户分享了一条 Tweet、推文串（thread）或 X 平台文章，你需要读取其正文内容
用户分享了一条 Reddit 帖子，你需要获取主帖内容及热门评论
用户分享了一个 YouTube 视频，你需要获取其字幕文本（transcript）
用户分享了 任意博客、文章或文档类 URL，你需要提取其中的纯文本内容
你需要从单条消息中 批量读取多个 URL

支持的数据源

数据源	解析方式	是否需要 API Key？
Twitter / X	FxTwitter API + Nitter 回退机制	否
Reddit	.json 后缀 API	否
YouTube	youtube-transcript-api	否
任意 URL	Trafilatura + BeautifulSoup	否

使用方法

from deepreader_skill import run

# 自动触发模式 —— 当消息中包含 URL 时自动运行
result = run("看看这个：https://x.com/user/status/123456")

# Reddit 帖子（含评论）
result = run("https://www.reddit.com/r/python/comments/abc123/my_post/")

# YouTube 字幕
result = run("https://youtube.com/watch?v=dQw4w9WgXcQ")

# 任意网页
result = run("https://example.com/blog/interesting-article")

# 批量处理多个 URL
result = run("""
  https://x.com/user/status/123456
  https://www.reddit.com/r/MachineLearning/comments/xyz789/
  https://example.com/article
""")

输出格式

内容以 .md 文件形式保存，并附带结构化的 YAML 前置元数据：

---
title: "Tweet by @user"
source_url: "https://x.com/user/status/123456"
domain: "x.com"
parser: "twitter"
ingested_at: "2026-02-16T12:00:00Z"
content_hash: "sha256:..."
word_count: 350
---

配置项

变量名	默认值	说明
`DEEPREEDER_MEMORY_PATH`	`../../memory/inbox/`	已摄入内容的保存路径
`DEEPREEDER_LOG_LEVEL`	`INFO`	日志输出级别

工作原理

检测到 URL → 是否为 Twitter/X？ → 调用 FxTwitter API → 若失败则回退至 Nitter
           → 是否为 Reddit？   → 添加 .json 后缀调用官方 API
           → 是否为 YouTube？  → 调用 youtube-transcript-api
           → 其他情况         → 使用 Trafilatura（通用网页解析）

当任意消息中出现 https:// 或 http:// 时，自动触发执行。