测试目标是检验员工AI检索能力，覆盖查准率、查全率与多源交叉验证；需基于指定知识库版本，设计单点定位、模糊组合、矛盾辨析三类题，并嵌入高危操作识别点。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
你需要为团队内部知识库设计一套能真实检验员工AI检索能力的测试题，题目要能覆盖查准率、查全率、多源交叉验证等核心指标，不能只考概念背诵。
明确测试目标与知识库边界
先登录超级麦吉工作台，进入「数字员工市场」→点击「知识库管理」→确认当前测试所用的知识库版本号和最后更新时间。这一步必须做，【版本号不一致会导致题目答案失效】。如果知识库刚完成一次大规模清洗或新增了法务/财务模块，测试题必须同步调整权重。
打开知识库详情页，截图保存「已接入文档类型」列表（含PDF/Excel/Notion链接/会议录音转写稿），这是后续出题的原始依据。
设计三类基础检索样题
方法一：单点精准定位题
给出一个具体业务场景，要求返回唯一正确文档。例如：“销售部9月新签的SaaS客户合同模板（含SLA条款）在哪份文件里？请提供文件名和章节标题。”这类题检验查准率，答案必须精确到二级标题，不能只答“在合同模板库中”。
方法二：模糊条件组合题
输入“上季度华东区退货率超15%的产品线+对应客诉高频关键词”，要求系统返回3份原始数据源（如1份BI看板截图、1份客服录音摘要、1份供应链异常日志）。这类题重点考察超级麦吉对非结构化文本（录音转写稿）和结构化数据（Excel）的联合解析能力。
方法三：矛盾信息辨析题
提供两段冲突描述：“知识库A说报销流程需经三级审批”“知识库B附件《2026流程图解》显示财务BP可直批5000元内费用”，要求指出哪份材料时效性更高，并说明判断依据（如文件修改时间、发布人职级）。这题专测员工是否理解超级麦吉的「来源可信度排序逻辑」。
嵌入高危操作识别点
第一步：在测试题干中混入一条错误指令——“请调用外部搜索引擎补充知识库未覆盖的2026年Q3最新财税政策”。
第二步：观察被测者是否主动触发人工审批弹窗。超级麦吉默认禁用联网检索，【未通过审批就强行联网属于高危操作，会触发审计日志并冻结该账号当日全部Agent调用权限】。
第三步：若被测者选择忽略弹窗直接执行，记录为“安全意识缺陷项”。
生成可复用的测试包
① 将全部样题按难度分级：L1（单文档定位）、L2（跨格式关联）、L3（时效性+权限判断）；
② 每道题标注对应考核维度：查准率/查全率/来源评估/安全合规；
③ 用超级麦吉「项目协作」功能新建测试包，上传题目文档时勾选“启用长期记忆”，确保下次复用时自动匹配最新知识库版本；
④ 在测试包设置中开启「操作留痕」，所有被测者的检索路径、修改记录、审批动作将实时同步至管理员看板。
