Muse Wonder需接入Playwright、browser-use或Selenium等外部浏览器框架才能执行真实自动化操作；必须开启tool calling和browser automation权限，配置对应后端服务，并使用结构化指令触发动作。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
要让Muse Wonder真正执行浏览器自动化任务，不能只靠它“说”，必须把它接入能真实操作浏览器的运行环境——它本身不自带浏览器驱动，需通过外部工具链调用Playwright、browser-use或Selenium等底层框架完成点击、滚动、填表等动作。
确认 Muse Wonder 是否已启用浏览器工具权限
打开 Muse Wonder 的 Model Card 或配置界面，检查是否启用了 【tool calling】 和 【browser automation】 两类能力开关。若未开启，所有后续指令都会被静默忽略，模型只会返回文字描述而不会触发任何真实操作。
在 Meta 官方部署的 Web UI 中，该选项位于 Settings → Advanced → Enable external tool execution；若使用本地 API 调用，则需在请求 payload 中显式传入 "tools": ["browser_use", "playwright_navigate", "playwright_click"] 等字段。
选择并接入浏览器操作后端
方法一：对接 browser-use（推荐开发者快速验证）
克隆 browser-use 仓库 → 安装依赖 pip install browser-use → 启动服务 python -m browser_use.server --host 0.0.0.0:8000 → 在 Muse Wonder 的工具配置中将 browser-use 的 endpoint 设为 http://localhost:8000/act。
方法二：对接 Playwright MCP Server（适合 Cursor / VS Code 深度集成）
执行 npx -y @executeautomation/playwright-mcp-server 启动服务 → 在 Muse Wonder 的 MCP 配置文件中添加 server 地址与工具映射 → 确保 Playwright 已预装 Chromium 浏览器（运行 playwright install chromium）。
方法三：绕过智能体，直接用 SeleniumBase 写脚本调用 Muse Wonder 的决策输出
这一步不依赖 Muse Wonder 的实时工具调用能力：先让模型生成结构化操作序列（如 [{"action":"click","selector":"#submit-btn"},{"action":"fill","selector":"input[name='email']","value":"test@meta.ai"}]），再用 SeleniumBase 的 sb.click() / sb.type() 等方法逐条执行。适用于对执行稳定性要求极高、且允许人工审核中间步骤的场景。
构造可触发浏览器动作的自然语言指令
第一步：明确任务边界，禁止模糊指令
错误示例：“帮我看看京东有没有打折的耳机”——模型无法判断“看看”是搜索、比价、还是下单，也无从决定打开哪个页面。正确写法必须包含起始 URL、关键动作、终止条件，例如：“打开 https://www.jd.com ，在搜索框输入‘索尼降噪耳机’，点击搜索按钮，等待商品列表加载完成，提取前3个商品的标题和价格，以 JSON 格式返回。”
第二步：强制要求模型输出结构化动作流
在 system prompt 中加入约束：“你只能输出符合 browser-use 规范的动作数组，格式为 [{\"action\":\"navigate\",\"url\":\"...\"},{\"action\":\"click\",\"selector\":\"...\"}]，禁止任何解释性文字。”
第三步：插入主动记忆锚点（关键）
若任务需跨页面保持状态（如登录态、筛选条件），在首次操作前加一句：“记住本次会话的用户偏好：语言=中文，地区=北京，登录账号=test@meta.ai。” Muse Wonder 的 Active Memory 机制会将此信息持久化，并在后续 navigate 或 fill 动作中自动注入 Cookie 或表单字段。
处理页面滚动与动态加载
当目标元素初始不可见时，Muse Wonder 可能因找不到 selector 而报错。此时需前置滚动指令：
在工具调用链中插入 playwright_scroll_to_element 操作，参数为 css=button#load-more 或 xpath=//div[contains(text(),'查看更多')]。
若页面采用无限滚动，必须显式要求模型生成循环逻辑：“重复执行：滚动到底部 → 等待新商品区块出现（用 playwright_expect_response 监听 /api/items 接口）→ 直到响应返回空数组为止。”
注意：Muse Wonder Full 支持 Active Focus，能自主判断是否需要重试或换 selector；但普通版 Muse Wonder 遇到动态加载失败时默认放弃，不会主动 retry。
捕获并修复执行失败
① 启用 Trace Viewer 全程录制：在 Playwright 后端启动时加入 tracing.start(screenshots=True, snapshots=True)。
② 失败后立即导出 trace.zip → 运行 playwright show-trace trace.zip → 定位卡点：是元素未加载？selector 错误？还是网络超时？
③ 将失败帧截图 + DOM 快照 + 错误日志打包，发给 Muse Wonder 并提问：“上一步点击 #pay-btn 失败，控制台报错 ‘Element is not attached to the DOM’，请生成3个新 selector 替代方案，并说明理由。”
这一步依赖 Muse Wonder 的自我纠正能力，普通版仅返回1个替代方案，Full 版会对比多个候选 selector 的稳定性得分并附带置信度。
