讲师中心 微信公众号
AI工具推荐 视频效率加速

腾讯混元升级AI绘画微调范式,图像真实感和美学评分提升3倍!

冬宇同学_4330

冬宇同学_4330

发布时间:2025-12-13 17:07:15

|

403人浏览过

|

来源于php中文网

原创

腾讯混元团队在ai绘画领域实现重大进展,通过革新微调范式,大幅增强模型生成图像的质量,使输出结果更精准匹配人类对细节与美感的复杂偏好。仅需在32块h20 gpu上训练10分钟,模型即可完成收敛,人工评估的真实感与美学得分提升超3倍。

当前主流扩散模型虽已引入奖励机制以贴近人类审美,但仍面临两大瓶颈:

其一,优化轮次有限,易触发“奖励作弊”现象——即模型为片面追求高分而产出低质图像;
其二,需依赖离线更新奖励模型才能改善美学表现,导致实时调控能力薄弱,适应性受限。

针对上述挑战,团队提出两项核心技术突破。

Direct-Align 方法:通过预设噪声注入策略,支持从任意扩散时间步无损还原原始图像。扩散过程本质是噪声与目标图像间的连续插值,该方法预先建模噪声先验分布,并利用插值机制直接实现跨时间步重建,有效规避传统反向传播在早期阶段因梯度剧烈震荡引发的数值不稳定问题。

实验证明,即便仅完成5%的去噪进程(即极早期时间步),模型仍可准确复原图像的整体构图与粗略结构。更重要的是,该方法支持在整个扩散轨迹上开展端到端优化,突破了ReFL、DRaFT等方案仅能在后期阶段(如最后25%时间步)施加干预的局限。若仅在末段优化,极易诱发严重奖励黑客行为——例如模型过度迎合HPSv2对红色系的偏好,或PickScore对紫色调的倾向,从而牺牲图像真实性与多样性。

语义相对偏好优化(SRPO) 是另一项关键创新。传统多奖励融合策略仅通过缩放不同奖励值来平衡偏好,未从根本上统一优化方向。SRPO则将奖励信号重构为文本条件驱动机制:对同一张图像,分别使用正向提示词与负向提示词计算奖励得分,取二者差值作为核心优化目标,实现更鲁棒的语义对齐。

在实际部署中,仅需在原始提示前添加轻量控制短语,即可完成在线风格调控。实验表明,加入“Realistic photo”类引导词后,图像真实感提升约3.7倍,美学质量提升达3.1倍。SRPO还支持多种细粒度风格迁移,如明暗调节、漫画化转换等,操作简洁且效果显著。

控制强度与所用关键词在奖励模型训练语料中的出现频次高度相关:高频词(如“painting”)响应迅速、效果稳定;低频词(如“Cyberpunk”)则建议搭配高频词协同使用,以保障调控可靠性。

AI舌诊面诊问诊医疗系统+诊疗商城系统源码
AI舌诊面诊问诊医疗系统+诊疗商城系统源码

AI 舌诊面诊问诊医疗系统 + 诊疗商城系统源码是一套结合 AI 辅助诊断与商品转化的健康类程序,基于浩创云、ThinkPHP(PHP)开发,支持微信服务号与 H5 端,适合做中医舌诊面诊问答、健康建议推送以及配套诊疗商品的运营。

下载

研究团队在FLUX.1-dev模型上开展了系统性验证。相较于ReFL、DRaFT、DanceGRPO等前沿方法,SRPO在各项评估指标中均位居榜首。

在HPDv2基准测试涵盖的3200个多样化提示下,SRPO不仅在自动评估指标(Aesthetic Score v2.5、PickScore、ImageReward等)全面领先,在人工评估中亦表现卓越。由10名专业标注员与3位领域专家组成的评审团,对500个提示生成图像进行双盲打分显示:原始FLUX模型在真实感维度的优秀率仅为8.2%,经SRPO微调后跃升至38.9%;美学质量优秀率由9.8%大幅提升至40.5%,整体用户偏好度优秀率达29.4%。

值得注意的是,DanceGRPO虽能提升部分美学指标,但常引入明显视觉伪影,如不自然的镜面高光与生硬边缘强化。相比之下,SRPO生成图像在维持高阶美学水准的同时,纹理呈现更为细腻、光影过渡更加自然真实。

尤为突出的是,仅经过10分钟SRPO训练的FLUX.1-dev,在HPDv2基准上的综合表现已超越最新开源版本FLUX.1.Krea。

这项成果不仅彰显了腾讯混元团队在生成式AI底层技术上的深厚积累,也为AI绘画的技术演进提供了全新范式,进一步拓展AI赋能艺术创作的边界与可能性。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜



热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

相关专题

更多
Figma AI图像处理全指南:抠图、扩图与矢量化实操
Figma AI图像处理全指南:抠图、扩图与矢量化实操

无需PS插件,掌握 Figma AI 原生图像工具,支持一键移除背景、智能填充丢失区域以及将位图快速转为高精度矢量路径。

272

2026.05.13

Playwright 测试失败怎么办
Playwright 测试失败怎么办

Playwright测试失败专题汇集超时、定位器匹配、浏览器提前关闭、依赖与插件配置、文件上传、SSL及Docker启动等故障文章,并介绍通过截图、报告和Trace定位错误。

0

2026.10.21

Playwright 页面操作指南
Playwright 页面操作指南

Playwright页面操作专题汇集元素定位、点击与输入、等待响应、多页面切换、Iframe、事件监听及文件处理的已审核文章,便于按操作场景查阅示例与常见问题。

0

2026.10.21

Playwright 入门教程
Playwright 入门教程

Playwright入门专题汇集测试框架安装、VS Code配置、录制脚本、编写首个用例、运行调试及查看报告的已审核文章,帮助初学者搭建端到端测试流程。

0

2026.10.21

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

100

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

80

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

40

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

40

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

20

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn