OpenClaw提供五种自动录制操作并同步生成AI语音解说的方案:一、CLI录制+多模态分析;二、PPT录屏+后处理;三、Camtasia录制+帧级解说;四、数据蛙录屏+实时注入;五、FoneDog+REST API调用。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

如果您希望在执行屏幕操作的同时自动生成语音解说,ToClaw(应为OpenClaw,当前名称存在拼写误差)提供了将录制行为与AI解说能力结合的实践路径。以下是实现自动录制操作过程并同步生成解说内容的具体步骤:
一、启用OpenClaw录制并触发多模态分析链路
该方法通过启动OpenClaw的录制会话,使其采集键盘、鼠标及屏幕区域截图元数据,并交由百川2-13B-4bits模型进行行为意图识别,再联动Qwen3.5-9B视觉模型完成画面理解,最终生成结构化文本解说。整个流程依赖后台多模态协同推理,无需人工撰写脚本。
1、确保已安装OpenClaw CLI工具及依赖环境,包括Python 3.10+、Git,并完成openclaw onboard --install-daemon初始化。
2、启动支持视觉能力的录制会话,命令中必须包含--enable-vision参数:
openclaw record start --project=auto_narration --enable-vision
3、执行目标操作(如打开浏览器、输入网址、点击按钮、切换Excel工作表),OpenClaw将以100ms间隔采集事件流与动态截图。
4、操作结束后运行openclaw record stop,系统自动将Protobuf格式录制数据提交至本地部署的百川2-13B-4bits与Qwen3.5-9B联合推理服务。
二、使用PowerPoint内置录屏+OpenClaw后处理合成解说
该方法适用于已有PPT课件或结构化演示内容的场景,利用PowerPoint原生录屏捕获动画与旁白,再通过OpenClaw对视频帧序列进行二次分析,补全缺失解说或优化语义连贯性。优势在于保留原始语音节奏,同时增强技术细节描述精度。
1、在PowerPoint中打开教学幻灯片,切换至【插入】选项卡,点击【屏幕录制】。
2、拖动虚线框限定仅录制PPT窗口区域,关闭系统通知与弹窗干扰,点击录制按钮开始捕获。
3、完成讲解后停止录制,导出为MP4文件并保存至本地指定路径,例如~/videos/ppt_demo.mp4。
4、调用OpenClaw视频解析接口:
openclaw analyze video --input ~/videos/ppt_demo.mp4 --output ~/narration/ --model baichuan2-13b-4bits,qwen3.5-9b
5、等待处理完成,生成带时间戳的Markdown格式解说稿与音频合成指令清单。
三、基于Camtasia Studio录制后接入OpenClaw语音生成管道
该方法借助Camtasia Studio的专业级录制与标注能力获取高质量原始素材,再将关键帧导出为图像序列,输入OpenClaw视觉理解模块,驱动百川2-13B-4bits生成符合教学逻辑的逐帧解说文本,并通过TTS引擎合成语音轨道。适用于需高保真画面与精准术语表达的工业软件培训场景。
1、启动Camtasia Studio,点击【录制屏幕】,设置录制范围为“窗口”,选定目标应用程序窗口。
2、开启系统声音与麦克风双通道音频采集,帧率设为30fps,分辨率保持1920×1080。
3、录制过程中使用内置标注工具添加箭头、文本框等视觉提示,强化操作焦点。
4、录制结束点击【停止】,视频自动导入时间轴;右键导出为无压缩AVI格式,保存路径记为~/camtasia_raw.avi。
ClawHub 安装与配置 | ClawHub setup. 帮助中文用户安装 ClawHub、配置镜像(如阿里云)、 找技能(发现/推荐)、以及技能的安装/更新/启用/禁用。 Use when: 安装 clawhub, clawhub 怎么用, 找技能/找 skill, 有什么技能可以/有什么 skill 可以...
5、运行帧提取与分析命令:
openclaw extract frames --video ~/camtasia_raw.avi --interval 1000 --output ~/frames/
openclaw narrate frames --dir ~/frames/ --prompt "请以专业软件培训师口吻,逐帧说明当前界面功能与用户操作目的"
6、输出解说文本将自动匹配每帧时间戳,并生成SSML格式语音合成文件。
四、使用数据蛙录屏软件录制+OpenClaw CLI实时解说注入
该方法面向Mac平台用户,利用数据蛙录屏软件的低延迟特性完成实时操作录制,同时通过OpenClaw的daemon服务监听新生成视频文件,一旦检测到完成写入即触发异步解说生成任务,实现“录完即得解说”的轻量闭环。
1、启动数据蛙录屏软件Mac版,选择【视频录制】模式,拖拽划定精确录制区域。
2、勾选系统音频与麦克风音频,开启降噪功能,点击红色录制按钮开始捕获。
3、操作完成后,软件自动弹出预览窗口,确认无误后点击【保存】,默认存储路径为~/Movies/ShouChao/。
4、确保OpenClaw daemon处于运行状态:
openclaw daemon start
5、配置watch目录监听规则:
openclaw watch add --path ~/Movies/ShouChao/ --action narrate --model baichuan2-13b-4bits
6、当新视频文件写入完成,OpenClaw将在~/Movies/ShouChao/narrated/下生成同名MP4文件,内嵌AI生成的语音轨道与字幕层。
五、通过FoneDog屏幕录像机+OpenClaw REST API手动触发解说
该方法适用于无法安装CLI工具的受限环境(如企业终端策略限制),采用HTTP协议调用OpenClaw本地API服务,将FoneDog录制的MP4文件上传至推理节点,获取JSON格式解说响应,再由前端工具完成音视频合成。全程不依赖本地Python运行时。
1、下载并安装FoneDog屏幕录像机,启动后选择【自定义区域】录制模式,设定合适分辨率与帧率。
2、配置音频源为系统声音与麦克风混合,点击录制按钮执行操作流程。
3、录制结束按快捷键Alt + 2停止,视频保存为~/FoneDog/record_20260419_1739.mp4。
4、确认OpenClaw API服务已启动:
openclaw api serve --host 127.0.0.1 --port 8080
5、使用curl命令上传文件并请求解说:
curl -X POST http://127.0.0.1:8080/v1/narrate \
-F "file=@~/FoneDog/record_20260419_1739.mp4" \
-F "prompt=请用简洁中文逐段说明用户操作步骤及其业务含义"
6、接收返回的JSON响应,其中narration_segments字段包含带起止时间的文本列表,可直接导入剪辑软件作为字幕源。

















