网易首页 > 网易号 > 正文 申请入驻

ChatGPT已能操控机器人,工程师代码都不用写

0
分享至

Alex 发自 凹非寺
量子位 | 公众号 QbitAI

当我还在跟ChatGPT吹牛尬聊时,有人已经在拿它操控机器人了。

不是别人,正是OpenAI的金主爸爸、不久前刚拿ChatGPT“重新发明搜索引擎”的微软

到目前为止,开发者调教机器人不仅技术门槛高,还道阻且长:

工程师需要在工作流程回路中,不断手写新代码和规范来纠正机器人行为;另外,操控不同的机器人可能需要不同的编程语言和环境。

而在ChatGPT的帮助下,工程师甚至不用手写代码——直接用人话描述想做什么,AI就能自动翻译成机器语言。

这意味着,一方面专业人士与机器人的交互效率起飞;另一方面,技术门槛也降低一大截,外行人甚至也能参与调试,创造出更多使用方法。

举个简单的例子:让无人机自动检查货架。

首先,操作者只需用自然语言给ChatGPT提出要求;然后,AI就能自动翻译成代码,并指挥无人机行动。(还可以规定无人机的飞行路径。)

难怪特斯拉前AI主管Andrej Karpathy会调侃:

最新的热门编程语言是英语。

一个AI指挥多种机器人

实际上,ChatGPT会玩儿的花样可多了。

比如,一位操作者跟AI说:“我渴了,请帮我找个喝的。”

此时AI并不会直愣愣地就去找水了,而是会很机灵地反问:

请问你想喝哪种?这里有好几种饮料,比如椰子水、可乐等等。

当然操作者也不是吃素的,他并未直接告诉AI选哪个,而是说:“我刚从健身房回来,请帮我找个健康点儿的饮料。”

然后更神奇的操作就开始了:

AI先是猜测他想喝椰子水,然后自己噼里啪啦写出一段代码(甚至还有注释):

写完就自己指挥无人机去找椰子水:

除了无人机,ChatGPT还能轻松操控别的小机器人,包括摄像头、机械臂等等。

比如让摄像头在房间里找出能加热午饭的东西。

还有指挥机械臂拼出一个微软的Logo。(悄悄夹带私货)

看到这些,有网友脑洞大开,有人发问:

他们是不是正在建立无所不能的天网?

还有人甚至调侃称,AI可能连发射核弹的指令都会写:

不过话说回来,其实离网友说的这些还差得远,毕竟现在还是需要人类参与的。

怎么实现的?

从前文可以看出,这只灵活的AI不仅与人交流畅通无阻,而且和机器也能快速沟通。

这主要得益于微软团队专门开发的一系列API高级函数库

他们没有让ChatGPT背后的语言大模型(LLM),生成某固定种类的代码;因为机器人是个多元化领域,这样可能会在不同场景下涉及大量微调。

而在新颖的操作框架下,不同机器人,都有自己对应的特定函数库。

——一个AI,就能适应不同的对象、不同的任务

一方面,这些函数库,能够连接到机器人控制系统中管理底层硬件,以及执行基本运动的代码和功能模块。

另一方面,为了让ChatGPT也能遵循函数库的规则,预定义函数命名就很关键。清晰的函数名,能让各API之间建立良好的功能连接,最终生成高质量的回答。

其中一项要求,就是所有API名称必须描述整体功能行为。例如,detect_object(object_name) 函数可以在内部链接到OpenCV函数或计算机视觉模型。

设计好库和API后,微软给ChatGPT编写了一个文本提示(prompt),描述目标任务,并明确说明函数库中哪些函数可用;另外,这还能规定ChatGPT生成代码用哪种编程语言。

值得一提的是,AI生成内容效果,和人为提示的质量呈正相关。为此,微软还开发了一个协作开源平台PromptCraft,任何人都能在此分享不同类机器人的Prompt策略。

到此,幕后部署基本完成,然后用户就能通过“说人话”间接操控机器人了。

如果想要检查AI生成的代码是否有Bug,随时都能在聊天框直接检查,或通过模拟器测试,人类可以用自然语言指导AI进行修正。

另外,还能等到用户对解决方案满意为止,再在将ChatGPT生成代码部署到机器人上。

最后,如果是你,会想用ChatGPT操控机器人做些什么呢?

论文地址:
https://www.microsoft.com/en-us/research/uploads/prod/2023/02/ChatGPT___Robotics.pdf
参考链接:
[1]https://arstechnica.com/information-technology/2023/02/robots-let-chatgpt-touch-the-real-world-thanks-to-microsoft/
[2]https://www.microsoft.com/en-us/research/group/autonomous-systems-group-robotics/articles/chatgpt-for-robotics/
[3]https://github.com/microsoft/PromptCraft-Robotics#promptcraft-robotics

— 完 —

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
法国队真核退队!德尚遗憾官宣!84场纪录终结,欧洲杯争冠悬了

法国队真核退队!德尚遗憾官宣!84场纪录终结,欧洲杯争冠悬了

阿泰希特
2024-03-19 10:08:08
陈建斌的婆娘好美,生完两个孩子反而更青春大气了!

陈建斌的婆娘好美,生完两个孩子反而更青春大气了!

小美说文
2024-03-18 17:29:45
A股:最后的提醒,两亿股民将共同见证,今天将迎来关键抉择

A股:最后的提醒,两亿股民将共同见证,今天将迎来关键抉择

阳光予我薄荷
2024-03-19 00:39:50
低开高走 青海春天盘中涨超4%

低开高走 青海春天盘中涨超4%

北京商报
2024-03-19 15:01:27
史上最荒淫皇帝:为称帝给老太后当面首,宠妃死时当众行变态之事

史上最荒淫皇帝:为称帝给老太后当面首,宠妃死时当众行变态之事

阿胡
2024-02-18 10:14:44
有违设计“常识”?《星刃》裸色服装有Debuff

有违设计“常识”?《星刃》裸色服装有Debuff

3DMGAME官方号
2024-03-18 14:01:55
广东两家银行在任董事长同时被查,两人曾有多年交集

广东两家银行在任董事长同时被查,两人曾有多年交集

湘财Plus
2024-03-19 07:35:09
16年后,皇马老佛爷再挖曼联!培养下一个C罗,身价4000万!

16年后,皇马老佛爷再挖曼联!培养下一个C罗,身价4000万!

风过乡
2024-03-19 07:35:35
逼近榜首!森林狼16分逆转横扫爵士 华子32+7+8死亡隔扣

逼近榜首!森林狼16分逆转横扫爵士 华子32+7+8死亡隔扣

醉卧浮生
2024-03-19 11:14:43
华谊王氏两兄弟,挥金如土时有多辉煌,人走茶凉后就有多落魄

华谊王氏两兄弟,挥金如土时有多辉煌,人走茶凉后就有多落魄

橘子大娱社
2024-03-18 21:15:03
4月4日清明节,切记:“上坟三不带,子孙祸不来”,真不是迷信

4月4日清明节,切记:“上坟三不带,子孙祸不来”,真不是迷信

水大叔
2024-03-19 13:02:50
凌晨美再引爆两岸!俄罗斯将军:中国40年没轰炸过别人,该动手了

凌晨美再引爆两岸!俄罗斯将军:中国40年没轰炸过别人,该动手了

星辰故事屋
2024-03-18 19:56:58
33年前,美国曾做过一个实验,将4男4女关在一起两年,结果怎样?

33年前,美国曾做过一个实验,将4男4女关在一起两年,结果怎样?

墨笑墨侃本尊
2024-03-17 22:56:38
俄境内频繁遇袭,乌派2500人大军冲击俄边境,俄外交部回应

俄境内频繁遇袭,乌派2500人大军冲击俄边境,俄外交部回应

红星新闻
2024-03-17 19:34:25
上海一女子遭亲姐姐设套,险些失去房产继承权!检察机关介入→

上海一女子遭亲姐姐设套,险些失去房产继承权!检察机关介入→

新民晚报
2024-03-19 13:33:27
32岁春晚女主持直播惊现不雅私密照,被永久封禁直播,本人:是油画

32岁春晚女主持直播惊现不雅私密照,被永久封禁直播,本人:是油画

谭公子
2024-03-15 23:48:31
港媒:梅西香港表演赛“缺阵”事件,主办方今日正式公布退款安排

港媒:梅西香港表演赛“缺阵”事件,主办方今日正式公布退款安排

环球网资讯
2024-03-18 16:57:22
要变天?今日A股内外资在拼命出逃,这是为什么?背后内因揭晓

要变天?今日A股内外资在拼命出逃,这是为什么?背后内因揭晓

老陈炒股
2024-03-19 11:42:38
“痴女”魏秋月:17岁爱上袁灵犀,曾因他与队友李娟大打出手

“痴女”魏秋月:17岁爱上袁灵犀,曾因他与队友李娟大打出手

凤幻洋
2024-03-19 13:05:10
中央纪委国家监委驻工业和信息化部纪检监察组组长叶民一行调研中国电科45所

中央纪委国家监委驻工业和信息化部纪检监察组组长叶民一行调研中国电科45所

阿芒娱乐说
2024-03-19 12:42:21
2024-03-19 16:12:49
量子位
量子位
追踪人工智能动态
9179文章数 175072关注度
往期回顾 全部

科技要闻

1块顶上代5块!英伟达新王牌让世界用上AI?

头条要闻

邯郸派60多名警察侦办初中生遇害案:此案要办成铁案

头条要闻

邯郸派60多名警察侦办初中生遇害案:此案要办成铁案

体育要闻

温水煮青蛙,最后发现自己才是那只蛙

娱乐要闻

李惠利发声道歉!柳俊烈劈腿确凿

财经要闻

"围猎"三丰智能:合作方可能无实际业务?

汽车要闻

新能源车自燃率更低?院士9个数据错8个

态度原创

手机
艺术
数码
家居
公开课

手机要闻

赵明:荣耀第一代Magic是所有AI手机鼻祖

艺术要闻

古典主义宫廷人物肖像︱德国学院派大师温特哈尔特绘画作品

数码要闻

华硕 Z790 ROG Maximus BTF Hero 主板上架:600W 显卡供电

家居要闻

灵动笔触,凝固慢煮时光

公开课

张雪峰:想多挣钱,得学理工科

无障碍浏览 进入关怀版