讲师中心 微信公众号
AI工具推荐 视频效率加速

千问怎么用来做大量文本的自动分类和打标签?

老明君_6821

老明君_6821

发布时间:2026-05-27 17:03:47

|

451人浏览过

|

来源于php中文网

原创

Qwen3-0.6B支持Prompt驱动零样本批量分类,适用于万级文本1天内初筛;另提供重排序、聚类、微调三种进阶方法,分别适配鲁棒性、探索性与高精度场景。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

千问怎么用来做大量文本的自动分类和打标签?

如果您希望将上万条非结构化用户反馈、工单或新闻稿件自动归类并打上语义标签,则可能是由于文本表达高度口语化、类别边界模糊且人工标注成本过高。以下是针对大规模文本批量分类与标签生成的多种可行方法:

一、基于Qwen3-0.6B的Prompt驱动零样本批量分类

该方法不依赖训练数据,利用模型对中文语义的原生理解能力与结构化输出控制能力,通过构造统一格式的提示词模板,实现单次API调用处理多条文本。适用于需在1天内完成万级文本初筛、且类别定义明确的场景。

1、准备待分类文本列表,每条文本以编号+冒号开头,例如:“1:下单后三天未发货,联系客服无人应答。”;

2、构造系统提示:“你是一个专业文本分类助手,请严格从以下四个类别中选择唯一最匹配的一项:物流问题、商品缺陷、服务投诉、功能咨询。不要解释,只按‘编号:类别’格式逐行输出,不得遗漏或添加额外字符。”;

3、将全部文本拼接为单个user消息,与system消息一同提交至Qwen3-0.6B的ChatOpenAI兼容接口;

4、接收返回结果后,使用正则表达式提取“编号:类别”模式,校验每行是否符合预设四类之一;

5、对匹配失败的条目单独重试,并设置最大重试次数为3次,超限则标记为需人工复核。

二、基于Qwen3-Reranker-0.6B的向量匹配式批量打标

该方法将分类任务转化为文本与标签描述之间的语义相似度排序任务,避免生成幻觉,对歧义表达(如“苹果”“Python”)鲁棒性强,适合类别定义抽象或存在子类嵌套的业务体系。

1、为每个目标标签撰写一句无倾向性、长度均衡的语义描述,例如:“物流问题”→“该反馈是否涉及配送延迟、包裹丢失、快递员失联、面单错误等履约环节异常?”;

2、将全部待分类文本作为query批次输入,所有标签描述组成candidate列表;

3、调用Qwen3-Reranker-0.6B的rerank接口,获取每个query与全部candidate的成对相似度得分;

4、对每条文本,选取得分最高的candidate对应标签作为主标签;

5、若最高分与次高分差值小于0.12,则同时保留两个标签并标记为低置信度双标。

qwencloud-usage
qwencloud-usage

管理账户认证,查询使用量和计费。用于:登录、登出、查询使用量、查看账单、免费套餐配额、编程计划状态、按量付费

下载

三、基于Qwen3-Embedding的无监督聚类辅助打标

该方法先将全部文本与预设标签名称共同编码为768维向量,在语义空间中进行层次聚类,再将聚类中心反向映射至最接近的标签,适用于类别尚未完全确定、需从数据中发现潜在主题的探索阶段。

1、使用Qwen3-Embedding模型分别对全部待分类文本及所有候选标签名称进行向量化编码;

2、将文本向量与标签向量合并入同一向量池,执行AgglomerativeClustering,设定初始聚类数为候选标签数的1.5倍;

3、计算每个聚类簇的中心点,并与各标签向量做余弦相似度比对;

4、为每个簇分配相似度最高的标签,若多个簇映射至同一标签,则合并该标签下的所有簇成员;

5、对未被任何簇覆盖的离群文本向量,单独计算其与各标签向量的相似度,取最高者作为边缘标签。

四、基于微调Qwen-7B-Chat的监督式高精度分类流水线

该方法通过对千问开源模型进行LoRA微调,使其在特定领域文本上具备更强判别力,适用于已有500条以上带标签历史数据、且要求F1值高于0.92的生产环境。

1、整理标注数据集,每条样本包含原始文本、主类别标签、可选副标签(最多2个)、人工置信度评分(1–5分);

2、使用LLaMA-Factory框架加载Qwen-7B-Chat基座模型,配置LoRA秩为64、alpha为128、dropout为0.1;

3、训练时启用label_smoothing=0.1,并对人工评分为1–2分的低质量样本加权系数1.5;

4、验证集上监控top-1准确率与multi-label F1,当连续两轮验证指标下降时提前终止训练;

5、部署后API响应中除主标签外,同步返回副标签及对应置信度,其中置信度低于0.78的副标签自动隐藏。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

相关专题

更多
WorkBuddy核心功能与实操模式
WorkBuddy核心功能与实操模式

深入探索WorkBuddy的强大功能。本专题包含智能问答、文档处理、会议纪要生成、日程管理、任务协作等核心模块的操作指南与最佳实践。通过图文并茂的教程,助您快速上手,最大化发挥WorkBuddy的办公效能。

602

2026.04.09

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

0

2026.10.15

MySQL 忘记密码怎么办
MySQL 忘记密码怎么办

MySQL忘记密码专题汇集不同版本与系统下的root密码重置方法,覆盖MySQL 5.7、8.0、Mac、Linux及本地集成环境,并提示恢复权限与重新登录的检查步骤。

0

2026.10.15

Vue.js 中 ref 和 reactive 的区别
Vue.js 中 ref 和 reactive 的区别

Vue.js中ref和reactive的区别专题汇集两种响应式API的定义、访问方式、对象解构、侦听与性能取舍等文章,帮助结合实际状态类型选择合适写法。

0

2026.10.15

VS Code 怎么配置开发环境
VS Code 怎么配置开发环境

VS Code开发环境专题汇集编辑器安装、语言扩展、编译器、解释器、终端和调试配置文章,覆盖Java、Python、C++和PHP等常见语言的入门设置。

0

2026.10.15

C++ 开发环境怎么搭建
C++ 开发环境怎么搭建

C++开发环境专题汇集Windows、Linux下的编译器与IDE安装配置教程,涵盖GCC、Clang、Visual Studio、CLion和VS Code,以及编译运行首个程序的步骤。

0

2026.10.15

Python 虚拟环境是什么
Python 虚拟环境是什么

Python虚拟环境专题介绍项目依赖隔离的作用,汇集venv与uv创建、激活、退出及解释器切换的相关文章,并覆盖Windows、Linux和VS Code中的常见配置问题。

0

2026.10.15

Python 怎么安装并配置环境变量
Python 怎么安装并配置环境变量

Python安装与环境变量配置专题汇集Windows、macOS和Linux的安装步骤、PATH设置、pip配置及常见报错排查文章,帮助完成解释器安装并验证命令行可以正常运行。

0

2026.10.15

PHP 连接 MySQL 失败怎么办
PHP 连接 MySQL 失败怎么办

PHP连接MySQL失败专题汇集PDO与MySQLi扩展配置、账号权限、主机端口、套接字和认证方式等排查文章,覆盖连接报错、密码变更与容器环境配置,帮助按错误提示定位原因并修复。

0

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
通义千问基本用法
通义千问基本用法

共1课时 | 232人学习

通义千问的提示词工程
通义千问的提示词工程

共1课时 | 268人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn