全球首个面向具身智能的开源视频生成基础模型来了
创始人
2026-07-09 18:37:45
0

7月9日,蚂蚁灵波开源LingBot-Video,这是全球首个基于Mixture-of-Experts(MoE)架构、面向具身智能的开源视频生成基础模型。该模型围绕机器人和具身智能的核心需求重新设计视频预训练范式,在推理效率、物理合理性、动作理解和任务完成度等方面取得系统性提升,为视频基础模型从数字内容创作走向具身智能提供了新的开源底座。

在北京大学联合字节跳动发布的基准RBench上,LingBot-Video的总分是0.620,超越了Wan2.6(0.607)、Seedance 1.5 Pro(0.584)、Cosmos3 Super(0.581)。RBench作为面向机器人操作视频的综合评测基准,重点考察模型能否生成符合真实物理规律的机器人行为。这一结果表明LingBot-Video 在生成机器人相关视频时,更能保持动作过程的合理性和任务执行的完整性。

过去几年,视频生成模型在画质、流畅度和创意表达上快速进步,但对于具身智能来说,一个看起来逼真、动作流畅的视频,却无法反映真实的物理规律,难以支撑机器人连续预测、规划和执行任务。与此同时,具身智能还要求模型具备更高推理效率,以适应实时交互和控制闭环。

这也让视频生成开始出现两种不同的演进方向:一条通向影院,服务于内容创作;另一条通向机器人,服务于物理世界的理解、预测与交互。LingBot-Video正是面向具身智能开辟视频生成新路线的重要探索,可用于机器人动作预测、仿真数据生成、动作条件建模、世界模型研究等方向。

记者了解到,LingBot-Video从架构、数据和训练三方面进行了系统创新。在架构上,LingBot-Video采用 DiT+MoE设计,以MoE替代传统Dense架构,在扩大模型容量的同时控制单次推理成本。其30B总参数模型在生成时仅激活约3B参数,相比同等参数规模Dense架构拥有约3倍推理效率。这一设计使模型既能获得大规模参数带来的视觉表达能力,又更适合具身智能对高效推理的要求。

在数据上,LingBot-Video构建了数据画像引擎,在海量互联网视频的基础上进一步引入VLA、VLN、Ego等机器人相关数据,覆盖灵巧操作、机器人移动和第一视角交互等场景,总规模达7万小时的具身数据。这些数据帮助模型学习动作与环境变化之间的关系,而不只是学习视频的表面纹理和视觉风格。

在训练上,LingBot-Video引入多维强化学习奖励系统。除美学、prompt跟随和运动一致性等常规指标外,模型进一步围绕物理合理性和任务完成度进行对齐,使生成结果更符合真实世界规律,也更贴近机器人在真实世界完成任务的需求。

来源:国际金融报

相关内容

最新资讯

错过大模型巨头,武汉杀入AI下... 6月29日,武汉举行了首届智能体经济大会。 智能体,这个比夏天还热的AI话题,围绕它的讨论,蔓延在会...
AItab上线!定义AI时代上... 打开浏览器这件事,每个网民每天至少重复几十次。但在AI时代,这个最基础的动作正在被重新审视——用户需...
轻松健康集团与阿里云达成AI全... 7月9日,2026(第二十五届)中国互联网大会期间,在“人工智能赋能医疗健康创新与应用论坛”上,轻松...
合肥2027国考笔试培训机构哪... 在合肥这座科教资源丰富、人才竞争激烈的城市,公职类考试培训的质量直接影响着备考者的学习效率和最终成果...
女版庞众望诞生!河南娃考699... 前言 近日,一位名叫韩雅平的河南女孩,以 699 分的高考成绩,走进了全国网友的视野。 她被称为 “...
剑指郑丽文?国民党代表提案:若... 2028台湾地区领导人选举,国民党内看好台中市长卢秀燕卸任后直取“大位”,然而党主席郑丽文、立法机构...
毕马威调研:AI按量计费普及,... 据外媒The Register当地时间7月3日报道,“四大”会计师事务所毕马威的一项新调查显示,不少...
谁是全球首款AI智能体手机?阶... 全球首款AI智能体手机来了?7月9日,南都N视频记者了解获悉,7月13日,阶跃星辰将发布一款AI智能...
7月9日ST南都涨10.62%... 证券之星消息,7月9日ST南都(300068)涨10.62%,收盘报4.48元,换手率14.5%,成...
全球首个面向具身智能的开源视频... 7月9日,蚂蚁灵波开源LingBot-Video,这是全球首个基于Mixture-of-Expert...