启用自动评分功能需五步:一、任务创建时在高级选项中勾选启用;二、选择并配置内置评分模板;三、上传JSON格式自定义规则;四、设置邮箱/飞书等通知方式;五、执行后查看雷达图报告并导出PDF。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
如果您在使用 mulerun 执行任务后,希望系统能根据预设标准对输出结果进行客观、可复现的量化评估,则需启用自动评分功能。该功能依赖内置评分器模块与用户自定义规则协同工作。以下是设置自动评分的具体步骤:一、启用任务级自动评分开关
自动评分需在任务创建时主动开启,MuleRun 默认不启用此功能以保障轻量执行。开启后,系统将在任务完成瞬间调用评分逻辑,生成结构化得分与维度分析。
1、进入 MuleRun 控制台,点击左侧导航栏「我的任务」。
2、点击右上角「新建任务」按钮,输入任务描述(如:“生成10条小红书种草文案”)。
3、在任务配置区域向下滚动,找到「高级选项」折叠面板并展开。
4、勾选“启用自动评分”复选框。
5、点击「保存草稿」或「立即运行」使设置生效。
二、配置内置评分模板
MuleRun 提供 7 类预置评分模板,覆盖内容质量、格式合规、数据准确性、时效性、安全性、多样性、可读性等核心维度。每个模板含默认权重与阈值,可直接选用或微调。
1、在任务编辑页「高级选项」中,点击「选择评分模板」下拉菜单。
2、从列表中选取匹配场景的模板,例如:内容创作类任务选“文案质量评分器”,数据处理类任务选“Excel校验评分器”。
3、点击模板右侧「参数配置」图标,调整各子项权重(如将“原创性”权重从默认30%调至50%)。
4、修改完成后点击「确认应用」。
三、编写自定义评分规则(JSON格式)
当内置模板无法满足专业需求时,可上传 JSON 格式的自定义评分规则文件。该文件定义评分维度、判断逻辑、分值映射及错误提示文本,支持正则匹配、关键词命中、长度校验、数值范围比对等基础函数。
1、在「高级选项」中,点击「上传自定义评分规则」按钮。
2、准备一个符合 MuleRun Schema 的 JSON 文件,示例片段如下:
{
"dimensions": [
{"name": "品牌词覆盖率", "type": "keyword_match", "keywords": ["MuleRun", "骡子快跑"], "weight": 25, "min_hit": 2}
],
"pass_threshold": 60
}
3、将文件拖入上传区域,系统自动校验语法与字段合法性。
4、校验通过后,点击“设为当前任务评分规则”。
四、绑定评分结果通知方式
评分完成后,系统支持将得分、各维度明细及不合格项说明,通过指定渠道实时推送,便于快速响应与迭代优化。
1、在任务编辑页底部,找到「评分结果通知」设置区。
2、勾选需要启用的通知方式,包括:邮箱摘要报告、飞书消息卡片、控制台站内信。
3、若选择邮箱或飞书,需提前在「个人设置→通知偏好」中完成账号绑定与授权。
4、点击「保存通知设置」。
五、查看与导出评分报告
每次任务执行完毕后,评分结果将与原始输出并列展示,支持多版本横向对比与历史趋势回溯。
1、在「我的任务」列表中,定位已完成且启用评分的任务行。
2、点击该任务右侧的“评分详情”链接。
3、页面显示总分、各维度得分雷达图、不合格项高亮标注及改进建议。
4、点击右上角“导出PDF报告”按钮,下载带时间戳与签名的正式评分文档。

















