斯坦福开发机器人学习框架UMI 可直接复制人类操作给机器人
UMI是斯坦福开发的一个机器人数据收集和策略学习框架,通过手持式夹持器和精心设计的接口进行数据收集。该框架能够将人类在复杂环境下的操作技能直接转移给机器人,无需人类编写详细的编程指令。通过人类亲自操作演示然后收集数据,直接转移到机器人身上,使得机器人能够快速学习新任务。
UMI整合了精心设计的策略接口,包括推理时延匹配和相对轨迹动作表示,使得学习到的策略不受硬件限制,可跨多个机器人平台部署。
项目地址:https://top.aibase.com/tool/universal-manipulation-interface
UMI提供了一个便携、直观、低成本的数据收集和策略学习框架,允许直接将多样化的人类演示转化为有效的视觉运动策略。这一框架特别适用于传统遥操作难以完成的任务,如动态、精确、双手操作和长期视角任务。
UMI的主要特点和功能包括技能转移、数据收集、多平台部署、提高机器人操作能力、快速适应新任务、降低机器人学习成本以及推动机器人技术在各领域的应用。
UMI的关键技术和设计理念包括硬件设计、硬件无关的数据收集、推理时延匹配与相对轨迹动作表示,以及零次射泛化能力。硬件设计采用手持式夹持器和高质量摄像头,配备鱼眼镜头和侧面镜子,以及IMU感知追踪,保证数据收集的准确性和稳定性。
硬件无关的数据收集通过通用的手持式夹持器和视觉系统,实现了数据的灵活性和可用性。UMI在策略接口中实现了推理时延匹配和相对轨迹动作表示,确保动作的准确性和时间对齐。同时,UMI学习到的策略具有零次射泛化能力,能够在新环境和对象下执行任务。
UMI在现实世界的应用验证中展示了其方法的有效性,包括动态投掷、精确放置、双手协作任务等。这些实验不仅证明了UMI策略的泛化能力,也展示了其在真实世界环境中的应用潜力。通过UMI,机器人能够快速学习新任务,提高操作能力,降低学习成本,推动机器人技术在各领域的广泛应用。
欧盟将要求所有手持设备均可更换电池 包括Switch掌机
欧洲议会成员上个月通过了欧盟电池指令的修订后,理事会于7月13日(星期一)批准了该法规。根据欧盟的说法,经过本周的批准,电池法规现在将由理事会和欧洲议会签署,并在欧盟的官方刊物上公布,它将在公布后20天内生效。更新规则引入的关键变化之一是关于电池回收的正式目标。该法规为生产商设定了收集废弃便携式电池的目标,到2027年底为63%,到2030年底为73%。站长网2023-07-18 00:04:300000埃森哲和谷歌云将提供人工智能托管服务来扩展生成式 AI,包括部署谷歌 Gemini 模型
埃森哲(Accenture)和GoogleCloud今天宣布,为帮助企业采用生成型AI改进运营、创造新的业务线和构建独特的客户体验,双方将建立一个全球性的生成型AI卓越中心(CoE)。这一中心将为企业提供行业专业知识、技术知识和产品资源,使用GoogleCloud的生成型AI产品组合建立和扩展应用程序,并加速实现价值。图片来自Accenture站长网2023-12-14 11:06:020000微软发布 Windows 11 AI 辅助功能 Windows Copilot 首个预览版
站长之家(ChinaZ.com)6月30日消息:微软在今年的Build开发者大会上宣布,将为Windows11增加AI辅助功能WindowsCopilot。WindowsCopilot将以独立窗口的形式展示在屏幕右侧,可根据用户需求完成多项任务。站长网2023-06-30 23:54:080000阿里云发布多模态大模型Qwen-VL-Max版本 性能比肩GPT-4V
阿里云公布了多模态大模型的最新研究成果,继Plus版本之后,再次推出Max版本。Qwen-VL-Max模型在视觉推理方面展现出卓越的能力,可以理解并分析复杂的图片信息,包括识人、答题、创作和写代码等任务。此外,该模型还具备视觉定位功能,可根据画面指定区域进行问答。站长网2024-01-26 11:32:140000微信,腾讯“劳模”
双十一这天,正逢腾讯举办公司25周年庆,马化腾在致员工信中写下腾讯新的管理理念:“让状态最好的人上场。”今年以来,在业务层面,腾讯执行的也是“让状态最好的业务上场”。11月15日,腾讯控股发布了2023年第三季度财报。本季度腾讯的微信相关业务大放异彩,单季度网络广告收入同比增长了20%,达到257亿元人民币。站长网2023-11-18 14:41:070000