张147. 和蚂蚁灵波沈宇军聊:机器人原生基础模型、大脑和本体的关系、预训练与数据scale up、老师汤晓鸥

147. 和蚂蚁灵波沈宇军聊:机器人原生基础模型、大脑和本体的关系、预训练与数据scale up、老师汤晓鸥

张小珺Jùn|商业访谈录·2026 年 7 月 22 日·1 小时 53 分人工智能创业与公司
在小宇宙播放
创作者写的节目说明

进入2026年,中国科技业萌生了一个新现象:出现一批从机器人大脑出发的公司,现阶段重心不在本体上。这个现象是反直觉的——过去,大家认为,硅谷机器人团队更专注大脑研究,中国机器人团队更专注硬件和本体。

在我们上集节目中,我访谈了Physical Intelligence(Pi)研究科学家柯丽一鸣。Pi是一家在硅谷做机器人大脑的备受瞩目的实验室。业内人士把它们比作机器人的OpenAI。

今天我邀请的是一位在本土探索原生具身基模的公司,是由蚂蚁集团孵化的子公司蚂蚁灵波,目前刚发布第二代具身基础模型。

我与首席科学家沈宇军聊了聊,如何从预训练开始训一个机器人模型?瓶颈是什么?机器人的GPT-1 moment在哪里?——大家也能从中感受一些中美思路的融合与差异。

接下来,就是我对沈宇军的访谈。

OUTLINE:

蚂蚁灵波的缘起

人工智能学生的一段迷茫与辗转

从字节跳动到蚂蚁研究院

蚂蚁成立子公司蚂蚁灵波做具身智能始末

做机器人的原生大脑

为什么决定从大脑开始?

通用意味着跨本体、跨场景、跨任务

24年底成立以后,25年、26年bet了什么?

25年:从真实传感器出发解决问题

26年:既然没办法push数字世界修改模型,基于物理世界的需求重做一遍

预训练准备数据核心是:1、你要下发什么样的任务,2、拿到数据以后怎么处理更干净

这次发布的6个模型和他们的关系(Depth、Vision、VLA、Video、World、VA 2.0)

但更本质的智能我们还没解决:把和人的交互考虑进去

做具身大脑之后,处理位置随机问题的能力强了很多

机器人泛化性的迹象到底出现了吗?

数据没有scale up是最大卡点

具身智能还没有到GPT-1时刻,因为没有看到比较好的做数据scale up的方式

当具身数据和互联网数据能达到相同量级,可能才到GPT-1时刻,我预计明年中

发完第一代模型我们就意识到,强行在数字模型上魔改不work

硅谷两家机器人大脑公司 :Physical Intelligence强调zero shot,Generalist强调后训练

随着灵巧手的成熟,真机遥操作和UMI(Universal Manipulation Interface,通用操作接口)

两条数据采集路线可能变化

细数2024-2026年具身智能全行业的发展与速度

行业发展不及预期的仍是数据,需要百万小时起步的数据量

机器人大脑与本体的关系

为什么不做本体?本体很难通用,如果场景选不准,本体设计有问题

现在大脑的开发落后于本体,未来大脑和本体一定交替上升

这一代的硬件不一定能够迭代去适应下一代的模型,尤其是传感器

接下来的几代机器人基座模型会如何迭代?

创业是赌出来的、与蚂蚁的关系、汤晓鸥

下过的“赌注”?

蚂蚁如何管理蚂蚁灵波?

最好的预期和最坏的预期?

最终的产业格局?也许贴近大语言模型的格局

你对人形机器人有执念吗? 没有!

当下的核心任务只有一个:智能不够!

我的老师汤晓鸥

LINKS:

我们的播客在小宇宙、Apple Podcast、Spotify等全音频平台播出;

我们的视频播客在Bilibili、小红书、视频号、抖音等全视频平台播出;

如果你想服用文字版,请搜索我们工作室的公众号:语言即世界language is world。

DISCLAIMER: 本内容不作为投资建议。

CONTACT: [email protected]

Jump into the new world-and explore with us!😉

说明里标出的时间点,点一下跳过去

AI 推荐理由

为什么值得听

AI 读完整集转写后给出的推荐理由

蚂蚁灵波首席科学家沈宇军,首次公开讲述他们如何押注"具身原生"——完全抛开数字世界模型,从零训练机器人大脑。他解释了为什么不做本体、为什么坚持从传感器出发,以及数据如何成为当前最大的瓶颈。你还会听到一个反直觉的细节:透过玻璃门看到猫,语义模型知道有猫,但机器人必须先感知到门。第二代模型用6万小时数据、20多种构型,把后训练数据量从100条降到20条。如果你关心机器人的GPT-1时刻何时到来,这期给出了一个从业者的真实判断。

AI 概要

本期概要

由 AI 从整集转写生成,是创作者说明之外的补充

本期节目访谈蚂蚁灵波首席科学家沈宇军,探讨具身智能的"原生"之路。沈宇军从清华到港中文,师从汤晓鸥,经历字节、蚂蚁研究院到蚂蚁灵波的职业转变。他分享了蚂蚁灵波从2024年底成立以来的技术决策:不做本体,专注机器人大脑;从传感器出发,坚持"具身原生"——完全基于物理世界需求从头训练模型。第二代模型(VA 2.0)包含六个模型,解决了视觉感知、数据质量、MoE架构和单向注意力等关键问题。沈宇军认为,当前具身智能的瓶颈在数据,需要百万小时量级才能迎来GPT-1时刻,而中国在数据采集上具有优势。他还讨论了行业格局、大脑与本体交替上升的趋势,以及创业的感悟。

AI 识别的章节

章节

点一章从那里开始播 · 与上面创作者标的时间点各自独立

00:06

开场:从机器人大脑现象引入,嘉宾背景介绍

主播介绍本期主题:中国出现一批从机器人大脑出发的公司,蚂蚁灵波是代表。嘉宾沈宇军自我介绍,并讲述从清华到港中文、师从汤晓鸥的经历,以及从GAN到生成模型的学术转向。

03:19

学术探索:从GAN到预训练,再到表征学习

沈宇军详细讲述自己从图像编辑到预训练再到表征学习的学术路径,解释为何放弃GAN转向自回归,以及GAN技术积累的价值。

10:03

职业转折:从字节到蚂蚁研究院,再到蚂蚁灵波

沈宇军回顾在字节跳动做特效的经历,以及2022年加入蚂蚁研究院的迷茫期,最终在2024年决定转向机器人,恰逢蚂蚁灵波成立。

12:37

组织对比与创业初心:为什么不做本体

沈宇军对比字节、蚂蚁研究院和蚂蚁灵波三种组织形态,阐述创业公司更贴近产业。明确蚂蚁灵波只做机器人大脑,不做本体,目标是让每家机器人都跑灵波的模型。

17:54

技术路线确立:从传感器出发,坚持视频学习

沈宇军介绍蚂蚁灵波的两大技术主张:从真实传感器出发解决物理世界问题,以及坚持从视频中学习时序建模。强调数字世界模型与物理世界需求不匹配。

25:32

第一代模型:炒菜demo与四个开源模型

沈宇军回顾外滩大会炒菜demo暴露的问题,坚定做大脑的决心。介绍第一代四个模型:Depth、Video、World、VLA,分别对应空间感知、视频生成、世界模型和动作执行。

33:43

数据规模与采集:从两万到六万小时

沈宇军透露第二代模型预训练数据达6万小时,第一代2万小时经清洗后剩1万多。数据以真机采集和ego数据为主,仿真数据主要用于评测。真机数据成本两年降三倍。

41:10

数据know-how:任务下发与清洗难点

沈宇军分享数据采集的两个核心know-how:如何设计任务覆盖所有自由度,以及跨本体数据清洗的困难。操作越简单的任务通用性越好。

48:43

第二代模型详解:Vision、Depth与VLA升级

沈宇军详细解释六个模型的关系:Vision是新的视觉预训练,Depth基于它实现空间感知;VLA升级支持更多构型和自由度,解决实验室与真实场景的gap。

59:12

原生模型:MoE、单向注意力与VA 2.0

沈宇军讲述Video模型解决MoE训练难题,World模型实现单向注意力,最终VA 2.0融合所有技术,从零开始训练,是真正的具身原生基座模型。

1:07:24

泛化性与学习成本:随机性处理与任务泛化

沈宇军展示第二代模型在位置泛化上的进步,如打撞球、随机撒玩具等场景。后训练数据量从100条降至20条,但任务泛化仍是难点。

1:16:21

GPT-1时刻:数据瓶颈与行业判断

沈宇军认为具身智能尚未到GPT-1时刻,瓶颈在数据。需要百万小时量级数据才能实现数据scale up,当前6万小时远远不够。

1:23:11

行业格局:大脑与本体交替上升,数据是核心

沈宇军分析今年行业转向大脑的原因:本体难通用、大脑落后于本体。预测大脑与本体将交替上升,传感器需从模型需求出发迭代。

1:31:48

创业感悟:赌出来的路与原生豪赌

沈宇军分享第一次创业的感悟:技术领先要有价值,创业要学会赌。蚂蚁灵波的两大赌注:传感器和原生。集团给予充分信任。

1:39:57

竞争格局与未来展望:大厂与创业公司并存

沈宇军预测智能层格局类似大模型:大厂一两家,创业公司两三家。强调当前核心是智能不够,数据不够,人形构型不是关键。

1:47:54

快问快答与结尾:个人偏好与人生之书

沈宇军回答快问快答:喜欢日料、推荐《笑傲江湖》、希望机器人是J人。强调情绪价值由人提供,机器人核心是干活。

张小珺Jùn|商业访谈录 · 更多单集

看全部 158 期 →

张小珺Jùn|商业访谈录

张147. 和蚂蚁灵波沈宇军聊:机器人原生基础模型、大脑和本体的关系、预训练与数据scale up、老师汤晓鸥

张小珺Jùn|商业访谈录 · 7 月 22 日 · 1 小时 53 分

147. 和蚂蚁灵波沈宇军聊:机器人原生基础模型、大脑和本体的关系、预训练与数据scale up、老师汤晓鸥

在小宇宙播放
创作者写的节目说明

进入2026年,中国科技业萌生了一个新现象:出现一批从机器人大脑出发的公司,现阶段重心不在本体上。这个现象是反直觉的——过去,大家认为,硅谷机器人团队更专注大脑研究,中国机器人团队更专注硬件和本体。

在我们上集节目中,我访谈了Physical Intelligence(Pi)研究科学家柯丽一鸣。Pi是一家在硅谷做机器人大脑的备受瞩目的实验室。业内人士把它们比作机器人的OpenAI。

今天我邀请的是一位在本土探索原生具身基模的公司,是由蚂蚁集团孵化的子公司蚂蚁灵波,目前刚发布第二代具身基础模型。

我与首席科学家沈宇军聊了聊,如何从预训练开始训一个机器人模型?瓶颈是什么?机器人的GPT-1 moment在哪里?——大家也能从中感受一些中美思路的融合与差异。

接下来,就是我对沈宇军的访谈。

OUTLINE:

蚂蚁灵波的缘起

人工智能学生的一段迷茫与辗转

从字节跳动到蚂蚁研究院

蚂蚁成立子公司蚂蚁灵波做具身智能始末

做机器人的原生大脑

为什么决定从大脑开始?

通用意味着跨本体、跨场景、跨任务

24年底成立以后,25年、26年bet了什么?

25年:从真实传感器出发解决问题

26年:既然没办法push数字世界修改模型,基于物理世界的需求重做一遍

预训练准备数据核心是:1、你要下发什么样的任务,2、拿到数据以后怎么处理更干净

这次发布的6个模型和他们的关系(Depth、Vision、VLA、Video、World、VA 2.0)

但更本质的智能我们还没解决:把和人的交互考虑进去

做具身大脑之后,处理位置随机问题的能力强了很多

机器人泛化性的迹象到底出现了吗?

数据没有scale up是最大卡点

具身智能还没有到GPT-1时刻,因为没有看到比较好的做数据scale up的方式

当具身数据和互联网数据能达到相同量级,可能才到GPT-1时刻,我预计明年中

发完第一代模型我们就意识到,强行在数字模型上魔改不work

硅谷两家机器人大脑公司 :Physical Intelligence强调zero shot,Generalist强调后训练

随着灵巧手的成熟,真机遥操作和UMI(Universal Manipulation Interface,通用操作接口)

两条数据采集路线可能变化

细数2024-2026年具身智能全行业的发展与速度

行业发展不及预期的仍是数据,需要百万小时起步的数据量

机器人大脑与本体的关系

为什么不做本体?本体很难通用,如果场景选不准,本体设计有问题

现在大脑的开发落后于本体,未来大脑和本体一定交替上升

这一代的硬件不一定能够迭代去适应下一代的模型,尤其是传感器

接下来的几代机器人基座模型会如何迭代?

创业是赌出来的、与蚂蚁的关系、汤晓鸥

下过的“赌注”?

蚂蚁如何管理蚂蚁灵波?

最好的预期和最坏的预期?

最终的产业格局?也许贴近大语言模型的格局

你对人形机器人有执念吗? 没有!

当下的核心任务只有一个:智能不够!

我的老师汤晓鸥

LINKS:

我们的播客在小宇宙、Apple Podcast、Spotify等全音频平台播出;

我们的视频播客在Bilibili、小红书、视频号、抖音等全视频平台播出;

如果你想服用文字版,请搜索我们工作室的公众号:语言即世界language is world。

DISCLAIMER: 本内容不作为投资建议。

CONTACT: [email protected]

Jump into the new world-and explore with us!😉

说明里标出的时间点,点一下跳过去

AI 推荐理由

为什么值得听

AI 读完整集转写后给出的推荐理由

蚂蚁灵波首席科学家沈宇军,首次公开讲述他们如何押注"具身原生"——完全抛开数字世界模型,从零训练机器人大脑。他解释了为什么不做本体、为什么坚持从传感器出发,以及数据如何成为当前最大的瓶颈。你还会听到一个反直觉的细节:透过玻璃门看到猫,语义模型知道有猫,但机器人必须先感知到门。第二代模型用6万小时数据、20多种构型,把后训练数据量从100条降到20条。如果你关心机器人的GPT-1时刻何时到来,这期给出了一个从业者的真实判断。

AI 概要

本期概要

由 AI 从整集转写生成,是创作者说明之外的补充

本期节目访谈蚂蚁灵波首席科学家沈宇军,探讨具身智能的"原生"之路。沈宇军从清华到港中文,师从汤晓鸥,经历字节、蚂蚁研究院到蚂蚁灵波的职业转变。他分享了蚂蚁灵波从2024年底成立以来的技术决策:不做本体,专注机器人大脑;从传感器出发,坚持"具身原生"——完全基于物理世界需求从头训练模型。第二代模型(VA 2.0)包含六个模型,解决了视觉感知、数据质量、MoE架构和单向注意力等关键问题。沈宇军认为,当前具身智能的瓶颈在数据,需要百万小时量级才能迎来GPT-1时刻,而中国在数据采集上具有优势。他还讨论了行业格局、大脑与本体交替上升的趋势,以及创业的感悟。

AI 识别的章节

章节

点一章从那里开始播 · 与创作者标的时间点各自独立

00:06

开场:从机器人大脑现象引入,嘉宾背景介绍

03:19

学术探索:从GAN到预训练,再到表征学习

10:03

职业转折:从字节到蚂蚁研究院,再到蚂蚁灵波

12:37

组织对比与创业初心:为什么不做本体

17:54

技术路线确立:从传感器出发,坚持视频学习

25:32

第一代模型:炒菜demo与四个开源模型

33:43

数据规模与采集:从两万到六万小时

41:10

数据know-how:任务下发与清洗难点

48:43

第二代模型详解:Vision、Depth与VLA升级

59:12

原生模型:MoE、单向注意力与VA 2.0

1:07:24

泛化性与学习成本:随机性处理与任务泛化

1:16:21

GPT-1时刻:数据瓶颈与行业判断

1:23:11

行业格局:大脑与本体交替上升,数据是核心

1:31:48

创业感悟:赌出来的路与原生豪赌

1:39:57

竞争格局与未来展望:大厂与创业公司并存

1:47:54

快问快答与结尾:个人偏好与人生之书

本期提到的品牌与产品

节目里自然聊到的,不是广告

商汤嘉宾实习过的公司
02:17中性
字节跳动嘉宾曾任职的公司
07:19中性
蚂蚁集团母公司,提供支持
10:02正面
Physical Intelligence硅谷机器人大脑实验室,路线对比
1:12:36中性
Generalist数据规模大,路线对比
1:12:36中性
笑傲江湖嘉宾推荐的人生之书
1:48:09正面
张张小珺Jùn|商业访谈录

张小珺Jùn|商业访谈录

深度商业访谈,以AI前沿技术与产业实践为主线,兼及产业史观、企业传承与人物成长叙事

已收录 158 期 · 最近更新 10 月 21 日

这一期适合谁

AI 对内容的推测

听众画像25–34 岁为主 · 偏男性 · 消费力较高
更适合AI从业者

这一期偏哪一派

偏沪派内容由事前准备的资料与嘉宾的专业性驱动,围绕明确问题(具身智能技术路线)展开,讨论范围被有意识收住,主播承担追问与控场角…

在哪里听

https://feed.xyzfm.space/dk4yh3pkpjp3复制

概要、章节、提及与推广标注由 AI 生成,可能有误;内容版权归创作者,声湃按创作者开放的 RSS 收录。了解收录与 RSS →

更多单集 全部 158 期 →