ChatGPT已能操控机器人,工程师连代码都不用写,网友:微软在搞天网?
好家伙,微软又玩出新花样
当我还在跟ChatGPT吹牛尬聊时,有人已经在拿它操控机器人了。
不是别人,正是OpenAI的金主爸爸、不久前刚拿ChatGPT“重新发明搜索引擎”的微软。
到目前为止,开发者调教机器人不仅技术门槛高,还道阻且长:
工程师需要在工作流程回路中,不断手写新代码和规范来纠正机器人行为;另外,操控不同的机器人可能需要不同的编程语言和环境。
而在ChatGPT的帮助下,工程师甚至不用手写代码——直接用人话描述想做什么,AI就能自动翻译成机器语言。
这意味着,一方面专业人士与机器人的交互效率起飞;另一方面,技术门槛也降低一大截,外行人甚至也能参与调试,创造出更多使用方法。
举个简单的例子:让无人机自动检查货架。
首先,操作者只需用自然语言给ChatGPT提出要求;然后,AI就能自动翻译成代码,并指挥无人机行动。(还可以规定无人机的飞行路径。)
难怪特斯拉前AI主管Andrej Karpathy会调侃:
最新的热门编程语言是英语。
一个AI指挥多种机器人
实际上,ChatGPT会玩儿的花样可多了。
比如,一位操作者跟AI说:“我渴了,请帮我找个喝的。”
此时AI并不会直愣愣地就去找水了,而是会很机灵地反问:
请问你想喝哪种?这里有好几种饮料,比如椰子水、可乐等等。
当然操作者也不是吃素的,他并未直接告诉AI选哪个,而是说:“我刚从健身房回来,请帮我找个健康点儿的饮料。”
然后更神奇的操作就开始了:
AI先是猜测他想喝椰子水,然后自己噼里啪啦写出一段代码(甚至还有注释):
写完就自己指挥无人机去找椰子水:
除了无人机,ChatGPT还能轻松操控别的小机器人,包括摄像头、机械臂等等。
比如让摄像头在房间里找出能加热午饭的东西。
还有指挥机械臂拼出一个微软的Logo。(悄悄夹带私货)
看到这些,有网友脑洞大开,有人发问:
他们是不是正在建立无所不能的天网?
还有人甚至调侃称,AI可能连发射核弹的指令都会写:
不过话说回来,其实离网友说的这些还差得远,毕竟现在还是需要人类参与的。
怎么实现的?
从前文可以看出,这只灵活的AI不仅与人交流畅通无阻,而且和机器也能快速沟通。
这主要得益于微软团队专门开发的一系列API和高级函数库。
他们没有让ChatGPT背后的语言大模型(LLM),生成某固定种类的代码;因为机器人是个多元化领域,这样可能会在不同场景下涉及大量微调。
而在新颖的操作框架下,不同机器人,都有自己对应的特定函数库。
——一个AI,就能适应不同的对象、不同的任务。
一方面,这些函数库,能够连接到机器人控制系统中管理底层硬件,以及执行基本运动的代码和功能模块。
另一方面,为了让ChatGPT也能遵循函数库的规则,预定义函数命名就很关键。清晰的函数名,能让各API之间建立良好的功能连接,最终生成高质量的回答。
其中一项要求,就是所有API名称必须描述整体功能行为。例如,detect_object(object_name) 函数可以在内部链接到OpenCV函数或计算机视觉模型。
设计好库和API后,微软给ChatGPT编写了一个文本提示(prompt),描述目标任务,并明确说明函数库中哪些函数可用;另外,这还能规定ChatGPT生成代码用哪种编程语言。
值得一提的是,AI生成内容效果,和人为提示的质量呈正相关。为此,微软还开发了一个协作开源平台PromptCraft,任何人都能在此分享不同类机器人的Prompt策略。
到此,幕后部署基本完成,然后用户就能通过“说人话”间接操控机器人了。
如果想要检查AI生成的代码是否有Bug,随时都能在聊天框直接检查,或通过模拟器测试,人类可以用自然语言指导AI进行修正。
另外,还能到等到用户对解决方案满意为止,再在将ChatGPT生成代码部署到机器人上。
最后,如果是你,会想用ChatGPT操控机器人做些什么呢?
论文地址:https://www.microsoft.com/en-us/research/uploads/prod/2023/02/ChatGPT___Robotics.pdf
参考链接:
[1]https://arstechnica.com/information-technology/2023/02/robots-let-chatgpt-touch-the-real-world-thanks-to-microsoft/
[2]https://www.microsoft.com/en-us/research/group/autonomous-systems-group-robotics/articles/chatgpt-for-robotics/
[3]https://github.com/microsoft/PromptCraft-Robotics#promptcraft-robotics
ChatGPT数据泄露,技术细节公布
在上周一,ChatGPT遭遇了一次用户数据泄漏事件,许多ChatGPT的用户都在自己的历史对话中看到了其他人的对话记录。不光是对话的历史记录,不少ChatGPTPlus用户还在Reddit和Twitter等平台发出了截图,表示在他们的订阅页面上看到了其他人的电子邮件地址。站长网2023-03-28 09:46:480000华为Mate X3万元旗舰秒售罄
华为新折叠屏旗舰手机MateX3经过预售之后终于开启正式销售,价格从1299元至15999元,这款手机从10:08开售之后便秒售罄,不少用户都表示没有抢到。华为MateX3搭载高通骁龙8芯片,不支持5G,全系标配12GB内存,后置三摄分别为5000万像素主摄、1300万像素超广角镜头、1200万像素5倍潜望式长焦镜头,内置4800mAh电池。截图来自官方站长网2023-04-08 22:12:500004马斯克为何没做出ChatGPT?揭秘OpenAI创始人的权力斗争
凤凰网科技讯北京时间3月25日消息,2018年,埃隆马斯克(ElonMusk)离开了人工智能研究公司、ChatGPT开发商OpenAI的董事会,当时声称的原因是避免与特斯拉产生任何利益冲突。但是最新报道指出,马斯克离开的真实原因是夺权失败。站长网2023-03-25 10:18:070000《马造2》世界前30记录被熊孩子清零!游戏主播超级小桀感慨回应
4月4日消息,今日,斗鱼游戏主播超级小桀”登上微博热搜,世界前30记录被熊孩子清零”等话题引起网友热议。据了解,事件起因是超级小桀”玩了多年的《超级马里奥制造2》15000困难关卡,世界排名30的存档记录,被自己母亲带到家中参观的亲戚家孩子玩到清零,并且直播间的部分设备也被损坏。站长网2023-04-04 20:50:570000什么时候开始,网购还要被道德绑架了?
网购平台越来越规范,骗子店铺少了,大店也害怕平台的威慑不敢随意欺客……作为消费者,你觉得现在的网购体验如何?消费权益一天天提高,大众满心欢喜,有人却不满意。卖家和买家,是一对拥有共同利益,却也有利益冲突的矛盾结合体。消费者权益提高,是如何提高的?——那都是从销售者手里争取回来的!早先时候,网购一次,那可是个惊心动魄的旅程:付了钱,要担心卖家发不发货,自己的钱会不会白白打水漂;站长网2023-03-13 14:48:150001