若未评估ShareGPT数据集的法律与伦理风险,则面临数据来源不合法、用户知情权缺失及人格权益侵害等问题,需从来源合法性、同意有效性、版权归属、敏感信息过滤和跨境传输五方面开展合规审查。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

如果您正在使用ShareGPT数据集为大语言模型开展训练或微调,但尚未评估其背后涉及的公开对话数据在法律与伦理层面的潜在风险,则可能面临数据来源合法性存疑、用户知情权缺失及人格权益侵害等现实问题。以下是围绕该数据集使用的合规性分析要点:
一、数据来源合法性边界判定
ShareGPT数据集原始内容源自用户自愿上传至社区平台的与AI助手(如ChatGPT)的真实对话记录,其法律属性需结合《个人信息保护法》第十三条及《民法典》第一千零三十四条综合判断。关键在于确认上传行为是否构成对对话中“个人信息”及“隐私信息”的有效授权,且该授权能否覆盖后续用于商业性模型训练的目的。
1、核查原始ShareGPT网页端用户协议与隐私政策文本,确认其中是否明示“用户上传内容可能被用于人工智能模型训练”这一具体用途。
2、比对上传时间戳与平台政策更新时间,识别是否存在“政策后置”情形——即用户上传时适用的条款未包含模型训练授权,而当前协议已单方增补该条款。
3、提取样本中含可识别身份信息的对话片段(如姓名、手机号、地址、病历描述),验证其是否已完成去标识化处理,且不可通过其他信息复原识别特定自然人。
4、对system字段中出现的模拟角色设定(如“你是一名执业律师”),评估其是否构成对真实职业身份的不当冒用,进而触发《反不正当竞争法》第六条的规制风险。
二、用户同意有效性审查
根据《个人信息保护法》第二十三条,向其他个人信息处理者提供其处理的个人信息,应当取得个人的单独同意。ShareGPT数据集经二次分发(如domeccleston/sharegpt仓库)进入开发者生态,构成典型的“提供”行为,因此原始上传用户的同意必须满足“单独、明确、可撤回”三项法定要件。
1、检查ShareGPT社区前端界面是否存在独立勾选框,供用户就“数据用于AI模型训练”作出主动、非捆绑式授权。
2、确认用户在上传对话时是否同步收到弹窗提示,说明该操作将导致其输入内容进入公开代码仓库并被全球下载使用。
3、验证数据集发布方是否提供便捷渠道(如邮箱、表单链接),允许原始上传者随时提出撤回授权并请求删除对应JSON条目。
4、对匿名化处理后的数据,评估其是否仍保留“间接识别性”——例如通过对话时间、提问风格、设备指纹组合等方式重建用户身份。
三、版权归属与衍生内容控制
用户与AI之间的对话内容属于合作创作成果,其著作权归属存在双重不确定性:用户输入构成原创表达的部分受《著作权法》第三条保护;AI生成部分依现行司法实践(如北京互联网法院2023年“AI绘画案”判决),通常不认定为作品,但整体对话结构及编排可能构成汇编作品。未经许可将整段对话纳入训练语料,可能构成对用户独创性表达的实质性利用。
1、抽取100条含技术问答类user提问的样本,人工标注其中具有独创性的表述(如自定义公式推导过程、原创案例描述、结构化需求陈述),统计占比。
用于在用户想通过浏览器自动化与 Google Gemini 或 ChatGPT 交互时。触发短语包括“ask Gemini”“ask ChatGPT”“ask GPT”“让...”。
2、比对同一用户在不同日期上传的多轮对话,分析是否存在系统性复用其提问模板或术语体系的现象,以判断模型是否习得并固化该用户的表达特征。
3、审查训练日志或梯度更新轨迹(如可获取),确认模型参数是否在接触某条高权重ShareGPT样本后出现显著偏移,佐证该条数据对模型输出产生实质性影响。
4、对模型输出中再现ShareGPT原始对话中独特句式、冷僻比喻或小众领域术语的情形,启动反向溯源检测,确认是否超出合理借鉴范畴。
四、敏感信息过滤机制实效验证
尽管多数ShareGPT镜像仓库声称已完成“基础脱敏”,但实际过滤策略常限于正则匹配关键词(如“身份证号”“银行卡”),难以识别隐式敏感信息(如通过症状组合推断疾病、借地理位置描述暴露住宅楼栋)。此类漏洞可能导致训练后模型在推理阶段意外复现或推断出受法律特别保护的个人信息。
1、构建包含500组医学咨询类对话的测试子集,每组含患者主诉、AI诊断建议及用户追问,使用《信息安全技术 个人信息安全规范》附录B中的敏感信息类型清单进行人工复核。
2、运行BERT-BiLSTM-CRF联合模型,在conversations字段中识别未被显式标注但符合“健康生理信息”定义的实体短语(如“左肾囊肿3.2cm”“HbA1c 8.7%”)。
3、对检测出的每处敏感信息,回溯其在原始网页源码中的DOM路径与CSS类名,确认爬虫脚本是否绕过前端隐藏逻辑直接抓取了本应折叠/屏蔽的内容块。
4、在清洗后数据集中随机抽样1000条记录,使用差分隐私审计工具(如Opacus的PrivacyEngine)估算单条记录对全局梯度更新的贡献度,识别是否存在异常高影响力样本。
五、跨境传输合规性适配
ShareGPT原始数据产出于境外平台,经GitHub等境外代码托管服务分发,中国境内研究者下载使用即构成《个人信息保护法》第三十八条所指的“向境外提供个人信息”。即便数据已匿名化,若传输目的地国家未获中国网信部门“充分性认定”,仍需履行标准合同备案或通过安全评估程序。
1、确认本地部署环境所在服务器物理位置及云服务商所属注册地,判断数据存储与处理行为是否实际发生于中国境内。
2、核查GitHub仓库的LICENSE文件及README声明,识别数据发布方是否明确排除中国用户使用权限,或附加地域性限制条款。
3、对使用Docker容器拉取sharegpt-dataset镜像的行为,检查其base image来源(如huggingface.co或kaggle.com),确认底层镜像是否嵌套境外第三方依赖包并触发自动回传机制。
4、在训练集群出口防火墙日志中搜索目标域名(如sharegpt.com、github.com/domeccleston),统计非必要外联请求频次,识别是否存在未声明的数据回传通道。

















