网易首页 > 网易号 > 正文 申请入驻

从“听懂”到“做到”,物理AI如何破解机器人落地难题?

0
分享至

来源:新华财经

机器人听懂了“拿起杯子”,接下来该怎么做?从理解一句话,到让机械手稳稳拿起杯子,中间还要跨过哪些难题?

近日,新网银行联合清华大学工会读书创作社(筹)、三境书屋,在清华大学三境书屋举办《新网银行AI构造力》专题直播,上海松应科技有限公司创始人兼CEO聂凯旋受邀做客,以“具身机器人爆火背后:物理AI到底是个啥?”为主题,围绕物理AI的技术原理、机器人仿真训练、国产基础软件研发及产业应用等话题,结合松应科技的产品与实践展开交流。


松应科技创始人兼CEO聂凯旋在新网银行直播间

从理解指令到走向完成动作

近年来,大语言模型快速发展,人形机器人也频频亮相。人工智能正在从数字空间向现实世界延伸,但让机器人理解指令,与让机器人准确完成动作,是两个不同的技术问题。

聂凯旋在直播中介绍,大语言模型在知识理解、信息处理和内容生成等方面展现出能力,具身智能进一步关注智能体如何通过身体与环境交互,完成具体任务。物理AI涉及对物理环境的建模、计算和预测,以及智能系统与现实世界的交互,为机器人等智能设备理解环境、执行任务提供支撑。

以机器人拿杯子为例,它要找到杯子,判断从哪里抓、用多大的力。力气小了,杯子可能滑落。力气大了,又可能把杯子捏坏。杯子的重量、材质和摩擦力,都会影响这个动作。一个人习以为常的动作,对机器人来说,需要感知、判断和控制共同配合。

“物理世界是一个非常耦合的环境。”聂凯旋表示,现实环境中的一个变化,可能引发一系列相互关联的物理反应。因此,人工智能不仅需要识别环境,还需要通过建模和计算,预测动作可能产生的结果,并在执行过程中不断调整。

在他看来,物理AI的应用并不局限于人形机器人。自动驾驶、工业装备、能源设施以及其他需要自主感知、决策和执行任务的系统,都可能成为物理AI的应用场景。

聂凯旋曾任华为云鲲鹏解决方案副总指挥、云产品总经理,拥有AI、云计算与芯片系统研发管理经验。

在数字世界训练 在真实世界行动

让机器人在真实环境中反复学习,往往面临成本、安全和效率等限制。尤其在高压电力作业、复杂工业生产等场景中,一次操作失误就可能造成设备损坏甚至人员伤害,难以完全依靠真实环境进行试错。

仿真技术因此成为物理AI研发的重要环节。

聂凯旋介绍,通过构建包含物理规律的数字环境,研发人员可以改变物体的位置、材质和摩擦条件,观察机器人在不同情况下如何完成同一个动作,再据此调整训练。杯子换了位置,机器人还能找到吗?接触条件变了,原来的抓取动作还能奏效吗?这些变化,都需要在训练与验证中逐步检验,再结合真机表现继续调整。

用于机器人训练的数字环境,需要模拟重力、碰撞、摩擦、物体形变等物理现象,让机器人的动作与环境变化产生相应反馈,为训练和任务验证提供计算环境。


机器人搬运任务的仿真画面(松应科技提供)

直播中,聂凯旋重点介绍了松应科技提出的“1∶8∶1”混合数据策略:10%的专家示教数据提供基础行为参考,80%的仿真合成数据用于大规模预训练,再通过10%的真机微调数据缩小虚实差距,形成持续迭代的数据闭环。

缩小仿真与现实之间的差距,是这条研发路径中的关键环节。如果机器人在真实设备上抓取失败,研发人员还要检查物体材质、接触条件或传感器误差等因素,将发现的问题带回数字环境,校准参数、补充训练,再到真机上验证。一次失败,也可以成为下一轮改进的起点。

用物理AI操作系统连接研发与应用

从场景构建、数据生成到训练、验证,机器人研发涉及多个相互关联的环节。如何把这些环节连接起来,是物理AI基础软件需要解决的问题。

围绕这一需求,松应科技自主研发ORCA OS物理AI操作系统,面向具身智能研发与工程交付,将场景构建、数据生成、算法开发、并行训练、验证与部署连接到统一研发流程中。

松应科技在今年世界人工智能大会展示的数字工厂场景中,人形机器人承担识别与分拣,轮式机器人接力运输,四足机器人参与异常巡检,无人机补充空中感知。这一展示呈现了ORCA OS在同一数字场景中组织多形态机器人协同训练与任务执行的能力。


数字工厂中的分拣与接力运输仿真场景(松应科技提供)

基于ORCA OS技术底座,松应科技推出面向企业项目开发与交付的ORCA Studio,以及面向开发者的ORCA Lab,为不同开发需求提供相应工具。

今年4月,《科技日报》曾报道ORCA Lab 1.0开发者平台,介绍其在普通笔记本电脑上开展机器人仿真训练的应用方式。对于缺乏真实机器人设备的开发者而言,这类工具提供了更容易进入的技术实践路径。

国产软硬件生态适配也是松应科技持续投入的方向。ORCA OS采用软硬件解耦架构,适配多家国产GPU及国产操作系统,为物理AI应用提供多元算力选择。

2026年8月,松应科技宣布连续完成A轮、A1轮数亿元融资,资金将重点用于ORCA OS迭代、国产芯片生态适配、开发者生态建设及产业场景拓展。

在聂凯旋看来,物理AI基础软件需要长期投入。工具交到开发者手中,能否帮助他搭起场景、训练策略、找到问题,并进一步在真实设备上验证,是研发需要持续回答的问题。

从机器人训练走向产业现场

在新网银行直播间中,聂凯旋以电力作业为例,介绍了机器人在专业场景中开展仿真训练的必要性。对机器人来说,找到按钮、完成按压,只是任务中的一部分。面对不同设备,它还要识别操作对象、适应环境变化,并在出现异常时作出相应处理。

到了工业现场,人们关心的也更加具体。设备能否持续运行?操作是否安全?使用成本能否承受?聂凯旋认为,稳定性、经济性和安全性,是企业评估物理AI应用的重要因素。

从公开实践来看,松应科技已将相关技术用于具身智能赛事及行业场景验证。在2026年电力具身智能应用大赛中,松应科技为仿真赛搭建数字训练与评测环境,基于ORCA Lab贯通场景采集、机器人训练、竞赛运行与自动评分全流程,为参赛团队开展电力任务训练和能力验证提供平台支撑。


电力具身智能应用大赛按钮操作任务仿真画面(松应科技提供)

对于产业发展而言,能否在具体场景中实现稳定、可重复、可验证的任务执行,比单次演示的完成度更具实际意义。

让懂场景的人参与物理AI开发

聂凯旋介绍,松应科技希望通过ORCA Lab等工具,让更多具有场景经验的人参与物理AI开发。开发者可以通过自然语言交互等方式,尝试构建场景、加载机器人模型、配置任务,并开展仿真训练。

他举例说,工厂一线工作人员每天接触设备和生产流程,熟悉哪些操作反复发生、哪些环节最费工,也更容易发现适合引入自动化设备的具体需求。如果能够借助便捷的开发工具先做初步验证,这些来自现场的经验,就有机会转化为更明确的技术方案,再与专业团队合作推进。

对于学生和个人开发者而言,即使没有真实机器人,也可以先在虚拟环境中了解机器人如何感知、决策和执行任务。ORCA Lab Lite轻量版面向个人开发者免费,Pro专业版面向高校教学与科研合作,为不同使用需求提供相应版本。

从仿真验证走向实际部署,还需要专业团队围绕设备适配、控制精度、安全测试及长期运行持续开展工程工作。场景使用者与研发人员的协作,有助于让工具开发更贴近实际需求。

谈到机器人对就业的影响,聂凯旋将目光放在危险性较高、重复性较强的工作上。前面提到的高压电力作业,关系着现场工作人员的安全。让机器人承担其中适合自动化的任务,也需要有人开发、生产、维护和使用这些设备。这些工作也会带来新的岗位需求。

从一个杯子能否拿稳,到工业现场的设备能否持续运行,聂凯旋的分享始终围绕机器人如何完成具体任务展开。在他的讲述中,稳定性、经济性和安全性,是技术走向产业现场需要回答的问题。熟悉生产流程的一线人员,也应有机会借助工具参与开发。这些判断,也呈现出松应科技研发ORCA OS物理AI操作系统的着力点。

本次直播是新网银行《AI构造力》系列内容之一。栏目持续关注人工智能及前沿科技的产业实践,通过与科技企业和行业专家对话,向公众呈现技术创新的实际进展及其应用前景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
5-4!斯诺克一夜4场绝杀,中国军团3胜3负,附17日赛程白雨露出战

5-4!斯诺克一夜4场绝杀,中国军团3胜3负,附17日赛程白雨露出战

球场没跑道
2026-11-17 08:45:40
亏麻了!17日午间股民实盘记录:11月累计浮亏超8万,盘面低迷,仅国产替代半导体成场内独苗,评论区哀嚎一片

亏麻了!17日午间股民实盘记录:11月累计浮亏超8万,盘面低迷,仅国产替代半导体成场内独苗,评论区哀嚎一片

火山詩话
2026-11-17 11:48:59
三航母集结后,美国突然捅出情报:伊朗密谋在华盛顿引爆“脏弹”袭击美高官?

三航母集结后,美国突然捅出情报:伊朗密谋在华盛顿引爆“脏弹”袭击美高官?

上观新闻
2026-11-17 14:55:09
英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

悦居英国
2026-10-16 18:52:20
【美股盘前】英伟达财报明早来袭:营收预计同比增长90%,段永平、“木头姐”减持;英伟达Q3削减25%英特尔持仓、增持SpaceX超6%,英特尔跌近3%;三星电子据悉与苹果接近...

【美股盘前】英伟达财报明早来袭:营收预计同比增长90%,段永平、“木头姐”减持;英伟达Q3削减25%英特尔持仓、增持SpaceX超6%,英特尔跌近3%;三星电子据悉与苹果接近...

每日经济新闻
2026-11-17 18:18:23
第一个面临消失的职业,不是幼师,不是快递员,而是这三种工作?

第一个面临消失的职业,不是幼师,不是快递员,而是这三种工作?

白米饭怎么吃
2026-10-11 21:32:47
女子长相漂亮,还能赊账被杀,2011年排查几百个嫖客,凶手让人意外

女子长相漂亮,还能赊账被杀,2011年排查几百个嫖客,凶手让人意外

汉史趣闻
2026-11-17 09:30:11
人民日报发文预警!新型黑恶势力,早已换上合法外衣,更难察觉

人民日报发文预警!新型黑恶势力,早已换上合法外衣,更难察觉

米果说识
2026-11-17 10:06:24
新加坡仇印情绪爆发,7%人口霸占31%高位,不干活光摘桃终遭反噬

新加坡仇印情绪爆发,7%人口霸占31%高位,不干活光摘桃终遭反噬

叹为观止易
2026-09-12 21:00:00
欧阳震华谈娱乐圈婚外情,坦言:“哪个男人不想的?想一下而已”

欧阳震华谈娱乐圈婚外情,坦言:“哪个男人不想的?想一下而已”

韩小娱
2026-11-17 11:08:21
机动车年检大势已定?从2027年开始,私家车年检可能面临5大变化

机动车年检大势已定?从2027年开始,私家车年检可能面临5大变化

三农老历
2026-11-17 04:23:04
西班牙六台:皇马将与JJ-加布里埃尔签约3年,支付36万欧培养费

西班牙六台:皇马将与JJ-加布里埃尔签约3年,支付36万欧培养费

懂球帝
2026-11-17 18:35:07
国外网红突然流行炫耀中国男友,惊讶他们没体味,为此感到自豪

国外网红突然流行炫耀中国男友,惊讶他们没体味,为此感到自豪

新游戏大妹子
2026-11-17 13:00:28
癌症康复后首战!凯特王妃空降印度,一个微小细节暗示王室地位已不可撼动

癌症康复后首战!凯特王妃空降印度,一个微小细节暗示王室地位已不可撼动

恒星文娱
2026-11-17 15:42:14
刚离两个月发现肚里有了动静,念着前夫底子好我咬牙生下来,自己拉扯到几岁大,前夫突然跪在门前要认儿子

刚离两个月发现肚里有了动静,念着前夫底子好我咬牙生下来,自己拉扯到几岁大,前夫突然跪在门前要认儿子

晓艾故事汇
2026-11-17 09:20:05
丈夫变心20年,妻子没提过一句离婚,孙子满月宴上,丈夫却崩溃了

丈夫变心20年,妻子没提过一句离婚,孙子满月宴上,丈夫却崩溃了

兰姐说故事
2025-04-30 20:00:14
根据马云对未来房价预言:200万买来的房子,到2030年能值多少钱

根据马云对未来房价预言:200万买来的房子,到2030年能值多少钱

云景侃记
2026-09-08 11:29:48
1987年,一美国人花200万买了一张不限次数的飞机票,航空公司很开心以为遇到了傻子,结果20年后,航空公司是苦不堪言,结局令人唏嘘.....

1987年,一美国人花200万买了一张不限次数的飞机票,航空公司很开心以为遇到了傻子,结果20年后,航空公司是苦不堪言,结局令人唏嘘.....

回京历史梦
2026-11-17 06:25:04
雷军小米澎程车内“弹钢琴”爆火,网友:“营销鬼才”!

雷军小米澎程车内“弹钢琴”爆火,网友:“营销鬼才”!

大厂财经社
2026-11-17 10:04:35
勇士惨败鹈鹕,伦德伯格被打自闭了?格林不除,勇士不兴!

勇士惨败鹈鹕,伦德伯格被打自闭了?格林不除,勇士不兴!

司峰阿道
2026-11-17 13:48:44
2026-11-17 19:16:49
新网银行官方号
新网银行官方号
新一代互联网银行
315文章数 27关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

媒体:东风-61列装引发岛内巨震 对手想拦截比登天还难

头条要闻

媒体:东风-61列装引发岛内巨震 对手想拦截比登天还难

体育要闻

我们三兄弟,都是意大利国脚

娱乐要闻

刘欢有6位生死之交,个个可托付后事

财经要闻

日本经济再现负增长 日央行12月还加息吗

汽车要闻

红旗H9 PHEV这后排,谁还抢着坐副驾?

态度原创

家居
数码
手机
游戏
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

三星下一代DRAM三条路线曝光 混合键合成关键工艺

手机要闻

阔折叠VS大折叠:消息称明年安卓新机阵营也有两种形态并行

微软第一方新作大地图曝光 体量巨大!自由度拉满

军事要闻

美乌陷入外交僵局 俄乌互攻势头不减

无障碍浏览 进入关怀版