讲师中心 微信公众号
AI工具推荐 视频效率加速

蚂蚁百灵开源 Ming-3.0 语音系列:五款模型覆盖语音合成、识别与理解

秋丽姑娘_7631

秋丽姑娘_7631

发布时间:2026-10-20 12:14:33

|

330人浏览过

|

来源于php中文网

原创

蚂蚁百灵宣布开源 ming-3.0语音系列,共计五款模型,覆盖语音合成、音频理解与对话、语音识别三类能力。开发者既可以按任务单独挑选,也能把不同能力拼进自己的工作流里。

在语音合成一侧,Ming-3.0-tts 系列的 Voice Design 允许用文字直接描述想要的音色,也支持用参考音频来设定声音特质。它更有意思的一处是"导演模式":创作者可以写明台词的表演方式,交代情绪如何起伏、哪些词需要重读、节奏该怎么处理,相当于把配音的二度创作也交给了模型。在蚂蚁内部,这套能力已经落进多条业务线——从阿福 App 的主对话与语音通话,到医生音色克隆、小虎智能办公,Ming-3.0-tts 都在其中。它既能独立承担配音,也能和 Ming-3.0-asr-tiny 组合,把语音输入和回答播报两个环节接起来。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

蚂蚁百灵开源 Ming-3.0 语音系列:五款模型覆盖语音合成、识别与理解

音频理解一侧的 Ming-3.0-audio-flash 与 tiny,直接面向长音频做转写、总结和观点分析这类复杂任务,并给出结构化输出。和传统"先语音识别出逐字稿、再拿去分析"的两段式流程相比,它能把对话里的情绪、说话人身份、环境信息一并保留下来,这背后要求模型对长上下文序列具备快速推理的本事。

语音识别一侧的 Ming-3.0-asr-tiny,靠构建普通话、英文、方言、领域热词等高质量语料并合理控制分布,再结合语言模型基座的上下文理解能力,利用候选热词列表和对话上下文信息,把真实业务场景里的识别效果整体抬了上去。在蚂蚁体系内,它已经用在阿福医生助手、支付宝搜索、蚁小保实时语音对话以及安全核身等场景中。

通用大模型接管 Blender:45分钟造出一条医院走廊,专业3D 工具迎来新对手

今年9月 OpenAI 推出 GPT-6Astra 之后,一股新的焦虑吹进了游戏和3D 创作圈。一批用户把模型接上3D 建模软件 Blender 和游戏引擎,开始用自然语言直接建模、搭场景、做动画,甚至拼出可以游玩的游戏——有人用45分钟就做完了一条医院走廊的3D 场景,还有人忙着分享如何制作并出售3D 模型的教程。

OpenAI 亮出的数据也相当抢眼:在要求根据工业零件多视图编写代码、重建三维形体的 BenchCAD 测试中,Astra 拿下95.9% 的几何重叠得分,而 GPT-5.6Sol 和 Claude Fable5.1分别是83.3% 和84.3%。大模型的空间理解与软件操作能力,正变成可以直接拿来干活的本事。

这波演示里,Reddit 用户 Time-Ad-7720公布的医院走廊是个容易看懂的样本。走廊建筑、病房门、病床、轮椅、输液架和护士站,全部由 GPT-6Astra 通过 Blender MCP 从零搭建,没有调用任何外部美术资产;从第一次输入要求,到最后渲染出一段镜头穿行的短片,总共约45分钟。流程分阶段推进:先拉出约35米的建筑框架、排布门洞与护士站,确认布局后再往里塞道具、补病房内景;病房门被做成开、关、半开三种状态,场景里还撒了散落纸张、错位天花板等细节;接着为相机做一段8秒向前移动的镜头、检查路径有没有被挡,最后再调灯光和材质。做过场景美术的人对这些步骤并不陌生,区别只在于,具体在 Blender 里执行的人换成了 AI,作者只在关键阶段查看结果、提修改意见。

支撑这套流程的 MCP 没那么玄乎,它本质是一套让 AI 调用外部工具的接口。常见的 Blender MCP 开源项目,就把创建3D 模型、修改材质、读取场景、运行 Python 代码等能力开放给大模型;用户描述想做什么,模型把要求翻译成操作,Blender 负责执行并回传场景信息。对能看图的大模型,截图和渲染图还能当检查依据——物体放歪了就调位置,灯光太亮了就改参数再试;许多重复结构也能靠代码批量生成,一排门窗、一组货架不必像人一样逐个点。即便不走 MCP,模型也能直接编写并运行 Blender 脚本来完成建模。虚幻引擎前段时间也更新了官方 MCP。

而 Astra 这一轮进步,重点在它能把这样的过程持续做下去:建模、摆放、赋材质、设镜头,每一步都要继承前面的结果,中途收到新要求时还得知道哪些该改、哪些必须留。OpenSe 强调的视觉判断、工具操作和长任务上下文能力,最终都落在一件具体的事上——AI 能不能少走弯路,把一个项目从头推到尾。

Codex Multi Subscription Auth Fallbacks
Codex Multi Subscription Auth Fallbacks

配置 OpenClaw 多提供商认证与 OpenAI Codex OAuth 备用方案,实现自动模型切换,适用于多 OpenAI Codex 账户设置。

下载

医院走廊之外,有人把能力用到了更完整的创作上。Reddit 用户 aniketjatav 展示了一款吉卜力风格的列车项目:玩家驾驶列车穿行于浮空小镇之间接送乘客,采用三维世界搭配部分二维角色和元素的2.5D 形式,资产由 Astra 程序化制作,还放出可直接体验的 Demo。围绕游戏开发的教程也随之涌现,从概念图到 Blender 建模、动画、引擎整合、补音频,风格延伸到废土、外星环境等。

一个二次元角色的案例,恰好把几种工具的分工摆清楚了。创作者先用 Tripo P2分别生成头部、头发和带服装的身体,再让 Astra 进入 Blender 把这些部件组装、调整,并配合辅助工具处理绑定和次级运动;不同表情也先由 Tripo 生成,再交给 Astra 搭切换逻辑,最终是一个能跳舞的低多边形角色。另一个更大规模的尝试是一座 GTA 风格城市:GPT 与 Codex 驱动 UE5、处理玩法逻辑与迭代,Tripo 生成3D 资产,其他工具参与画面与音频;项目包含8栋从概念推进到可玩资产的建筑、247条人物语音,以及5个电台里的10首曲目,整场消耗了25亿 Token,大量用量花在修复机制、测试交互和反复调整上。通用模型与专业工具在这里形成了具体合作:GPT 负责安排和执行制作流程,Tripo 负责提供基础资产——尤其是头发、服装、身体这些最直接影响观感的部分,仍交给专用3D 模型。

专业3D AI 公司的处境,也因此和单纯做文案改写的应用不同。它们手里握有专门的三维生成能力,要处理几何、纹理和模型结构。GPT 学会操作 Blender,首先威胁到的是那些方便用代码和规则实现的需求:走廊、门窗、货架、模块化建筑都适合程序化生成,一段脚本写好后还能不断改尺寸、换排列、做变体。但换成复杂角色、服装褶皱、毛发轮廓,或需要贴近参考图的具体造型,让语言模型一步步编写几何操作,就可能变成一条漫长的路;专用模型直接交出基础资产,通用模型再负责组装、整理和接入引擎,各自省掉对方不擅长的工序。值得注意的是,Tripo、Meshy 本身也在往生产环节深扎:Tripo P2.0强调原生四边形拓扑、部件分离、面数控制和局部网格修改,Meshy 则提供网格处理、UV 展开、自动绑定和动画等接口,解决的都是模型好不好改、动起来容不容易处理、局部出问题能否只修那一块的后续问题。

更关键的变化在于,通用模型正在成为新的中心平台。未来创作者可能只需向助手提出需求,由助手决定调用哪一家服务——谁更便宜、更快、更容易拿到合格结果就多用,效果更好的随时切换。专业公司可能获得更多订单,却也更难靠使用习惯留住客户。价格会让这种竞争格外直接:以 Tripo 公布的 P2API 定价计,生成一个带标准纹理的模型为110积分、折合约1.1美元,官方给出的 P2.0单次资产生成时间约10至40秒;Meshy 的 Meshy-7系列基础图生3D 含纹理为30积分。相比之下,GPT-6Astra 按 Token 收费,截至9月23日其标准 API 每百万输入 Token 为10美元、输出为50美元(缓存另计);假设一个任务消耗100万未缓存输入加10万输出 Token,调用费就是15美元,外部生成与渲染还得另算。对某个具体资产,如果专用模型十几秒就能给出合适底稿,让 GPT 反复写脚本、看截图、修细节,就可能既慢又贵;反过来,一排货架靠脚本批量生成,逐件调用生成服务也没必要。

这也让中国模型手里多了一张分量很重的牌。DeepSeek V4.1-Flash 已支持工具调用和图像理解,其每百万未缓存输入 Token 为1至2元、输出为4至8元(按空闲和高峰区分);沿用上面的算力,100万输入加10万输出只需1.4至2.8元,对照的是 Astra 的15美元。便宜到这个程度,就给流程设计留出了很大空间:复杂任务交给更强模型,批量命名、格式处理、规则明确的修改交给低价模型,重复操作再固化为脚本。模型之间的能力差距,最终要连同成功率和返工次数一起算;但国产模型只要能稳定接手大量日常工作,就足以把整条生产流程的成本往下拉。

当然,AI 能把世界堆出来,游戏人还得让它真正跑起来。前面那个二次元角色案例里,创作者还分享了一个没展开的细节:表情切换,是 AI 主动决定把不同表情对应的网格放在一起、不用的部分缩进头部,需要时再切出来——演示能跑通,但放进实时游戏后,就要继续检查额外几何、蒙皮负担和动作衔接。游戏行业早吃过这类亏:《城市:天际线2》曾通过 Popul8一次创建一组100名市民让城市更鲜活,上市后却让团队吃了大亏,不得不持续优化资产与 LOD 问题,乃至人物细节、景深、全局光照、雾效带来的性能负担。如今引擎已能通过脚本批量生成和设置 LOD,AI 也能参与这些操作,可究竟该删到什么程度、角色轮廓有没有损伤、镜头切换会不会突兀,仍要放进具体游戏里看。

这正是程序员、美术和技术美术接下来要面对的工作变化:代码可以由 AI 写,但出了 Bug 得有人定位;模型可以由 AI 生成,但关节变形、贴图浪费、碰撞错误和性能超标,也得有人解决。制作速度越快,问题积累的速度同样可能越快——如果前期没有明确规格,等 AI 把整座城市堆出来再去逐个清理,省下的时间很容易重新搭进去。人的作用会更早进入流程:什么样的角色值得细化、哪些场景只需大致氛围、预算留给近景人物还是战斗特效,这些判断会直接影响 AI 接下来做什么。会描述想象中的画面固然有用,知道一款游戏真正需要什么,才可能把生成能力转化为制作效率。

许多个人作者和小团队,过去连验证一个想法的成本都难以承担,现在有机会更快拿到可以修改和游玩的第一版;专业工具会在竞争中重新寻找位置,创作者也能尝试以前做不起的内容。至于最后能留下什么,依然要回到作品本身——玩家不会因为一座城市消耗了25亿 Token 就觉得它更好玩,也不会因为角色是手工制作还是 AI 生成,就自动获得更好的操作体验。当内容越来越容易被生产出来,游戏人需要花更多力气决定的,是这个世界为何值得进入,以及玩家为什么愿意继续待下去。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

60

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

40

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

40

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

20

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

20

2026.10.16

Revel框架入门与安装配置
Revel框架入门与安装配置

本专题从Revel框架环境搭建讲起,系统介绍命令行工具安装、项目创建、目录结构、配置文件及热代码重载,帮助开发者快速完成首个Go Web应用。

20

2026.10.16

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

40

2026.10.15

MySQL 忘记密码怎么办
MySQL 忘记密码怎么办

MySQL忘记密码专题汇集不同版本与系统下的root密码重置方法,覆盖MySQL 5.7、8.0、Mac、Linux及本地集成环境,并提示恢复权限与重新登录的检查步骤。

40

2026.10.15

Vue.js 中 ref 和 reactive 的区别
Vue.js 中 ref 和 reactive 的区别

Vue.js中ref和reactive的区别专题汇集两种响应式API的定义、访问方式、对象解构、侦听与性能取舍等文章,帮助结合实际状态类型选择合适写法。

20

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
腾讯元宝使用手册
腾讯元宝使用手册

共0课时 | 0人学习

DeepSeek手册
DeepSeek手册

共0课时 | 0人学习

Claude Code 快速上手核心指南
Claude Code 快速上手核心指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn