讲师中心 微信公众号
AI工具推荐 视频效率加速

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

夏瑶同学_5513

夏瑶同学_5513

发布时间:2026-07-10 12:04:26

|

181人浏览过

|

来源于php中文网

原创

7月9日,蚂蚁灵波正式开源 lingbot-video——全球首个基于混合专家(mixture-of-experts, moe)架构、专为具身智能定制的开源视频生成基础模型。该模型紧扣机器人与具身智能的核心诉求,重构视频预训练范式,在推理速度、物理合理性、动作语义理解及任务执行完整性等关键维度实现系统性突破,标志着视频基础模型正从数字内容生产迈向真实物理世界交互的新阶段,也为行业提供了首个面向具身智能的高质量开源底座。

在由北京大学联合字节跳动构建的机器人操作视频评测基准 RBench 上,LingBot-Video 以总分 0.620 领跑,显著优于 Wan2.6(0.607)、Seedance1.5Pro(0.584)和 Cosmos3Super(0.581)。RBench 聚焦于评估模型生成视频是否符合现实世界的物理约束与机器人行为逻辑。这一成绩印证了 LingBot-Video 在生成机器人操作类视频时,具备更强的动作合理性保障与端到端任务完成能力。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

(图说:LingBot-Video 在 RBench 基准中综合表现最优)

为更全面检验其对物理动态建模的能力,蚂蚁灵波还设计了一套内部 benchmark,从通用视频质量与具身任务适配性两大维度展开横向对比。结果显示,在与 NVIDIA Cosmos3、Wan2.2A14B、LongCat-Video、Hunyuan Video1.5、LTX-2.3 等五大主流开源视频模型的比拼中,LingBot-Video 在具身相关场景下全面超越各基线模型。

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

(图说:多维评测表明,LingBot-Video 在具身任务中展现出更优的物理规律遵循性与动作连贯性)

近年来,视频生成技术在画质清晰度、运动流畅性与艺术表现力方面持续跃升;但对具身智能而言,一段“视觉上逼真”的视频若缺乏真实的物理因果支撑,便难以驱动机器人进行连续感知、实时规划与可靠执行。与此同时,具身应用场景对模型响应延迟、计算开销与部署灵活性提出了更高要求。

由此,视频生成技术正悄然分化出两条演进路径:一条通往影视工业,服务于创意表达与内容消费;另一条则驶向机器人本体,致力于理解、预测并干预物理世界。LingBot-Video 正是蚂蚁灵波锚定后者所发起的关键技术探索。

该模型在架构设计、数据构建与训练策略三大层面实现了协同创新。

架构层面,LingBot-Video 采用 DiT(Diffusion Transformer)与 MoE 相融合的技术路线,以稀疏激活的专家机制替代传统稠密结构,在扩展模型容量的同时严格控制单次推理负载。其总参数量达 30B 的版本,在实际生成过程中仅需激活约 3B 参数,相较同规模 Dense 模型,推理效率提升近 3 倍。这种“大而快”的特性,既保留了大规模参数带来的强表征能力,又契合具身智能所需的低延迟响应需求。

数据层面,LingBot-Video 搭建了专属的数据画像引擎,在广泛采集互联网公开视频的基础上,深度整合 VLA(Vision-Language-Action)、VLN(Vision-and-Language Navigation)、Ego-centric(第一人称视角)等机器人领域数据源,覆盖灵巧抓取、自主导航、人机协同交互等典型具身场景,最终构建起高达 7 万小时的高质量具身视频数据集。这些数据使模型不再停留于像素级复现,而是深入学习动作意图、环境反馈与状态变迁之间的内在关联。

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

训练层面,LingBot-Video 引入多目标强化学习奖励机制。除常规的美学质量、文本对齐度与运动一致性等指标外,特别增设物理合理性(如重力响应、碰撞约束、能量守恒)与任务完成度(如目标抵达、物体操控成功)两大核心奖励信号,推动模型输出结果更贴近真实世界运行逻辑,也更适配机器人在物理空间中完成具体任务的实际需求。

据悉,LingBot-Video 已开放应用于机器人动作预测、高保真仿真数据合成、条件化动作建模、世界模型构建等多个前沿方向。目前,该项目已在 GitHub 等平台全面开源。

相关文章

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

80

2026.10.10

Kratos框架HTTP与gRPC服务开发教程
Kratos框架HTTP与gRPC服务开发教程

本专题围绕Kratos框架双协议服务开发,涵盖HTTP路由与处理器编写、参数获取、gRPC服务实现与客户端调用、metadata上下文传递、encoding编解码注册、统一响应封装、超时控制与流式响应实现方法。

40

2026.10.10

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

20

2026.10.10

C++虚函数怎么定义和调用
C++虚函数怎么定义和调用

C++虚函数是实现运行时多态的重要机制。本专题从virtual关键字的基本用法入手,介绍基类与派生类之间的函数重写、基类指针调用派生类方法,以及动态绑定的执行过程,帮助初学者掌握虚函数的核心语法。

40

2026.10.10

C++类与对象的封装方法教程
C++类与对象的封装方法教程

C++封装是面向对象编程的核心特性之一,通过类将数据与操作数据的函数组织在一起,并利用访问权限控制外部访问。本专题介绍类的定义、成员变量、成员函数以及public、private和protected的使用方法,帮助初学者掌握封装的基本原理。

20

2026.10.10

C++构造函数定义与调用方法
C++构造函数定义与调用方法

C++构造函数用于初始化类对象,是面向对象编程的重要基础。本专题从构造函数的定义、声明和调用入手,介绍默认构造函数、带参数构造函数、拷贝构造函数及成员初始化列表,帮助初学者掌握对象创建与初始化的基本方法。

40

2026.10.10

Kratos框架零基础入门教程
Kratos框架零基础入门教程

本专题整理Kratos框架入门内容,涵盖Go环境准备、kratos CLI安装升级、new命令创建项目、目录结构分层说明、服务启动与双协议端口、依赖下载报错排查,帮助开发者快速跑通第一个Kratos框架微服务应用。

20

2026.10.10

C++条件判断语句怎么写
C++条件判断语句怎么写

C++条件判断是控制程序执行流程的重要基础。本专题介绍if、if-else、else if和switch等常见分支语句,结合条件表达式、比较运算符与代码示例,帮助初学者掌握不同场景下的判断逻辑。

20

2026.10.10

C++变量怎么声明和赋值
C++变量怎么声明和赋值

C++变量是编写程序和存储数据的基础。本专题围绕变量声明、定义、初始化、赋值和类型选择等内容展开,帮助初学者理解不同变量的用法,并掌握在实际代码中定义和使用变量的方法。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
即梦AI使用教程
即梦AI使用教程

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn