GenEM:利用大语言模型实现机器人行为的生成表达
**划重点:**
- 🤖 **挑战与需求:** 人机交互领域存在着许多挑战,其中之一是使机器人展示类似于人类的表达行为,特别是在多样化社交情境中。
- 🔄 **传统方法的限制:** 传统的基于规则和基于数据的方法在新的社交环境中需要更大的可扩展性,但数据驱动方法受到数据集的限制。
- 🔍 **GenEM方法:** Google DeepMind 和多伦多大学的研究人员提出了Generative Express Motion(GenEM)方法,专注于利用大型语言模型生成机器人的表达行为。
在人机交互领域存在许多挑战,其中之一是使机器人展示类似于人类的表达行为。传统的基于规则和基于数据的方法在新的社交环境中需要更大的可扩展性,而数据驱动方法受到数据集的限制。为了应对这一挑战,研究人员提出了Generative Express Motion(GenEM)方法,专注于利用大型语言模型(LLMs)生成机器人的表达行为。
GenEM方法利用LLMs提供的丰富社交背景,创造出适应性强、可组合的图形机器人运动。它采用少样本思维链激励,将人类语言指令转化为参数化的控制代码,使用机器人已有的和学到的技能。
行为生成包括多个步骤,从用户指令开始,最终生成机器人执行的代码。为了评估该方法,研究考虑了两项用户研究,将生成的行为与由专业动画师创建的行为进行比较。该方法在表达力和机器人行为的适应性方面优于传统的基于规则和基于数据的方法。研究人员还利用用户反馈来更新机器人的策略参数,并通过组合现有行为生成新的表达行为。

两项用户研究证明了GenEM的有效性,显示生成的行为被认为是有能力和可理解的。通过使用移动机器人和模拟四足动物进行的仿真实验表明,该方法优于直接将语言指令翻译成代码的版本。它还允许生成对机器体系结构不可知且可组合的行为。

GenEM利用LLMs的研究在机器人领域取得了显著的进展,展示了自主生成富有表现力、适应性强和可组合的机器人行为的能力。这一方法突显了LLMs在机器人领域的潜力,强调了它们通过自主生成富有表现力行为来促进有效的人机交互的作用。
小红书能直接跳转微信了!
见实发现小红书可以直接跳转微信小程序了!前几年还是只在大品牌上试水,如今已经开始在普通品牌上开放。在见实2023年的年度大调研中就提到:7成企业已经在加大全域的布局。如今小红书的微信小程序跳转更是推进了全域通路的打通。站长网2024-03-11 12:08:280003拼多多、抖音、淘宝、京东们的“仅退款”之殇
第一个几乎是全电商标配“仅退款”的618过去了,随之刮起的一场围绕在商家、平台、消费者之间的风暴,却有愈演愈烈之势。从最后一个头部电商平台京东跟进生效“仅退款”政策的去年12月29日,到今年618前夕的168天内,风暴眼就已经在形成。0001美图上线“AI字画”功能 可将文字巧妙隐藏进图片中
近日,美图设计室上线“AI字画”功能,用户输入文字后,可通过美图AI技术将文字巧妙地隐藏到图片中。该功能主要面向生活场景的大众用户及社交媒体中的营销人员,可以通过“AI字画”功能来开拓社交媒体的创新玩法,也可以对自己的壁纸、头像等进行内容升级。打开美图设计室App中的“AI字画”功能,输入文本,选择预置效果,用户即可轻松生成属于自己的创意字画。站长网2023-09-27 08:48:460001字节大模型BuboGPT已开源 demo可玩
字节推出了一种新的大模型,名为BuboGPT,BuboGPT是一种先进的大型语言模型(LLM),能够将文本、图像和音频等多模态输入进行整合,并具有将回复与视觉对象进行对接的独特能力。它展示了在对齐或未对齐的任意图像音频数据理解方面的出色对话能力。项目地址:https://bubo-gpt.github.io/站长网2023-08-19 13:07:070006小米13 Ultra搭载澎湃P2/G1芯片:支持应急模式 1%电量续航60分钟
快科技4月15日消息,今天上午,雷军正式宣布小米13Ultra将同时搭载澎湃P2/G1芯片,续航能力大升级。此外,该机还将支持应急长续航模式,在最后1%的电量时,还能续航60分钟时间,避免突然断电措手不及。据悉,澎湃G1芯片是去年在小米12SUltra上首发搭载,分为电池健康、精准预测、续航提升三大功能。站长网2023-04-15 14:42:400001