Firecrawl Scrape Cn_AI Agent skill-PHP中文网

Firecrawl Scrape Cn

Polar Sponsor

爱发电赞助

.NET 9.0

立即下载

从任意 URL 提取干净的 Markdown 内容，包括 JS 渲染的 SPA。当用户提供 URL 并想要其内容、说"抓取"、"抓网页"、"获取页面"、"从 URL 提取"或"读取网页"时使用此 Skill。支持 JS 渲染页面、多个并发 URL，返回 LLM 优化的 Markdown。

Firecrawl 网页抓取

功能概述

Firecrawl 网页抓取是一项面向实际任务的技能，主要用于抓取一个或多个 URL，返回干净的、LLM 优化的 Markdown；多个 URL 并发抓取；

核心要点

你有特定的 URL 并想要其内容；
页面是静态或 JS 渲染的（SPA）；
工作流升级模式的第 2 步：搜索 → 抓取 → 映射 → 爬取 → 交互；

使用与执行

f, --format <formats>；输出格式：markdown, html, rawHtml。它将相关步骤、工具调用和结果整理方式集中到统一流程中，帮助使用者更快完成目标并减少重复操作。从功能定位来看，该技能强调把分散的操作要求整理成清晰、可复用的处理流程，使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数，再依据技能说明逐步执行；

结果检查与注意事项

若输入条件不完整，应先补齐信息或采用保守配置，避免因错误假设导致结果偏离需求。执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期，并对异常提示、缺失字段和边界情况进行处理；涉及批量任务时，还应保存进度，避免中断后重复操作。该技能适合用于一次性任务，也可以接入自动化工作流，与其他技能或上层代理配合完成更完整的业务链路；在组合使用时，应明确每一步的输入输出关系，并避免不同步骤之间出现参数冲突。

Firecrawl 网页抓取

抓取一个或多个 URL，返回干净的、LLM 优化的 Markdown。多个 URL 并发抓取。

使用场景

你有特定的 URL 并想要其内容
页面是静态或 JS 渲染的（SPA）
工作流升级模式的第 2 步：搜索 → 抓取 → 映射 → 爬取 → 交互

快速开始

# 基础 Markdown 提取
firecrawl scrape "" -o .firecrawl/page.md

# 仅主内容，无导航/页脚
firecrawl scrape "" --only-main-content -o .firecrawl/page.md

# 等待 JS 渲染后抓取
firecrawl scrape "" --wait-for 3000 -o .firecrawl/page.md

# 多个 URL（每个保存到 .firecrawl/）
firecrawl scrape https://example.com https://example.com/blog https://example.com/docs

# 获取 Markdown 和链接
firecrawl scrape "" --format markdown,links -o .firecrawl/page.json

# 询问页面内容的问题
firecrawl scrape "https://example.com/pricing" --query "企业版价格是多少？"

选项

选项	描述
`-f, --format`	输出格式：markdown, html, rawHtml, links, screenshot, json
`-Q, --query`	询问页面内容的问题（5 积分）
`-H`	在输出中包含 HTTP 头
`--only-main-content`	去除导航、页脚、侧边栏 — 仅主内容
`--wait-for`	抓取前等待 JS 渲染
`--include-tags`	仅包含这些 HTML 标签
`--exclude-tags`	排除这些 HTML 标签
`-o, --output`	输出文件路径

提示

优先使用普通抓取而非 --query。 抓取到文件，然后用 grep、head 或直接读取 Markdown — 你可以自己搜索和推理完整内容。仅当你想要单个目标答案而不保存页面时使用 --query（额外消耗 5 积分）。
先尝试抓取再交互。 抓取可以处理静态页面和 JS 渲染的 SPA。仅在需要交互（点击、表单填充、分页）时升级到 interact。
多个 URL 并发抓取 — 用 firecrawl --status 查看你的并发限制。
单格式输出原始内容。多格式（如 --format markdown,links）输出 JSON。
始终引用 URL — shell 会将 ? 和 & 解释为特殊字符。
命名约定：.firecrawl/{site}-{path}.md