WorkBuddy通过五步实现竞品网页变动监控：一、配置URL与抓取频率；二、设置CSS/XPath提取与智能去噪比对；三、多通道（邮件/Webhook）提醒；四、快照存档与人工复核；五、可选私有代理绕过反爬。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
如果您希望实时掌握竞品网站的页面更新动态，例如价格调整、文案变更或活动上线，则需要对目标网页内容进行周期性比对与差异识别。以下是WorkBuddy实现网页变动定时抓取与提醒的具体操作路径：
一、配置目标URL与抓取频率
WorkBuddy通过设定监控任务的基本参数，明确需跟踪的网页地址及检查节奏，确保系统在指定时间点自动发起HTTP请求获取最新HTML内容。该步骤是后续比对的前提，直接影响监控的时效性与资源占用平衡。
1、登录WorkBuddy控制台，进入「监控管理」模块。
2、点击「新建监控任务」，在「目标URL」栏中粘贴竞品网页完整链接，如https://example.com/pricing。
3、在「抓取频率」下拉菜单中选择预设周期，包括每15分钟、每小时、每日等选项；也可点击「自定义」输入Cron表达式，例如0 */30 * * * ?表示每30分钟执行一次。
4、勾选「启用SSL证书验证」以保障HTTPS站点抓取稳定性，若目标站使用自签名证书则取消勾选。
二、设置内容提取与比对规则
为避免整页HTML因广告位、时间戳或用户ID等动态元素造成误判，WorkBuddy支持通过CSS选择器或XPath定位关键区域，仅对业务相关文本块进行哈希值计算与历史快照比对，显著提升变动识别准确率。
1、在「内容提取」区域选择「CSS选择器」模式，输入核心内容容器的选择器，例如.product-list或#main-content。
2、点击「预览提取结果」按钮，确认返回文本是否覆盖价格、标题、按钮文案等需监控字段。
3、开启「智能去噪」开关，系统将自动过滤<script>、<style>标签内容及连续空白字符。
4、保存后，WorkBuddy将对首次抓取内容生成SHA-256指纹，并在后续每次抓取时重新计算并比对。
三、配置多通道变动提醒方式
当检测到内容指纹不一致时，WorkBuddy依据预设通知策略即时推送差异摘要，确保运营或产品人员第一时间响应。提醒信息包含变更时间、URL、差异行高亮片段及原始快照对比链接。
1、在「通知设置」中勾选「邮件提醒」，输入接收邮箱地址，支持多个地址用英文逗号分隔。
使用 draw.io（.drawio 格式）和 SVG 生成兼容 Microsoft Visio 的架构图。当用户需要以下任一场景时触发： - 用于 Visio 或技术文档的架构/系统/网络图 - 带连接标注的分层控制系统图 - 将 draw.io XML 转换为稳定、可嵌入的 SVG - 修复 Visio 或 draw.io 无法打开的故障排查类图表 - 任何需专业级布局且文本可编辑的图表
2、启用「Webhook通知」，填写内部IM系统（如钉钉/飞书）的机器人Webhook地址，并选择JSON格式载荷模板。
3、在「消息模板」编辑框中插入变量，例如{url}、{change_summary}，系统将自动替换为实际值。
4、点击「测试通知」发送样例消息，验证各通道可达性与内容渲染效果。
四、启用变更快照存档与人工复核
WorkBuddy默认保留最近10次抓取的HTML快照及文本摘要，支持按时间轴回溯查看具体修改位置。此功能为人工判断变更性质（如是否为恶意篡改或A/B测试）提供原始依据，避免自动化误报干扰决策。
1、在任务详情页点击「快照历史」标签，列表显示每次抓取的时间戳、状态码与内容长度。
2、点击某一行右侧的「查看文本」按钮，展开纯文本对比视图，新增内容以绿色背景+加粗字体标识，删除内容以红色删除线标识。
3、点击「下载HTML」可保存原始页面文件至本地，用于离线审查或合规存证。
4、对已确认为有效业务更新的记录，可点击「标记为已处理」，该条目将从待办提醒中移除。
五、部署轻量级私有抓取代理（可选）
针对部分启用反爬机制的竞品网站，直接由WorkBuddy公有节点访问可能触发IP封禁或验证码拦截。此时可通过部署独立代理服务，将抓取请求路由至自有出口IP，提升成功率与隐蔽性。
1、准备一台Linux服务器（Ubuntu 22.04 LTS），安装Docker与docker-compose。
2、下载WorkBuddy官方代理镜像，执行命令：docker run -d --name wb-proxy -p 8080:8080 -e WB_TOKEN=your_task_token workbuddy/proxy。
3、在监控任务的「高级设置」中启用「使用私有代理」，填入服务器公网IP与端口，例如http://203.0.113.45:8080。
4、保存后，所有对该任务的抓取请求将经由该代理中转，WorkBuddy控制台显示的请求来源IP即为该服务器地址。
