特斯拉机器人进厂打工,马斯克:手的自由度今年将达到22个
特斯拉机器人Optimus最新视频出炉,已经可以在厂子里打工了。
正常速度下,它分拣电池(特斯拉的4680电池)是这样的:
官方还放出了20倍速下的样子——在小小的“工位”上,拣啊拣啊拣:
这次放出的视频亮点之一在于Optimus在厂子里完成这项工作,是完全自主的,全程没有人为的干预。
并且在Optimus的视角之下,它还可以把放歪了的电池重新捡起来放置,主打一个自动纠错:
对于Optimus的手
,英伟达科学家Jim Fan给出了高度的评价:
Optimus的手是全球五指机器人里最灵巧的之一。
它的手不仅有触觉感应,自由度(DoF)也达到了11个,而同行基本上都只有5-6个自由度。
并且坚固耐用,无需经常维护即可承受大量物体交互。
而就在Jim Fan的评论区,马斯克还现身透露了一个更重磅的消息:
今年晚些时候,Optimus手的自由度将达到22个!
不过有一说一,视频中展示Optimus分拣自家电池还只是“开胃菜”。
这一次,特斯拉罕见地公布了机器人的训练详情。
和特斯拉汽车相似的逻辑
首先在神经网络方面,从视频中的字幕中可以得知,特斯拉给Optimus部署的是一个端到端的神经网络来训练分拣电池的任务。
也正因如此,Optimus所用到的数据仅仅是来自于2D摄像头和手部的触觉、力度传感器,并直接生成关节控制序列。
特斯拉工程师Milan Kovac进一步透露,这个神经网络完全是在机器人的嵌入式FSD计算机上运行,并且由机载电池供电:
当我们在训练过程中添加更多不同的数据时,单个神经网络可以执行多个任务。
在训练数据方面,我们可以看到是人类戴着VR眼镜和手套,通过远程操作的方式来采集:
对于这一点,Jim Fan认为:
将软件设置为第一人称视频流输入和精确控制流输出,同时保持极低的延迟是非常重要的。
这是因为人类对自己的动作和机器人的动作之间哪怕是最小的延迟都非常敏感。
而Optimus恰好有一个流体全身控制器,可以实时执行人体姿势。
并且特斯拉机器人已经将这种模式扩展到了其它任务中:
如此规模也是令Jim Fan大受震惊的一点:
并行收集数据,一个机器人是远远不够的,而且人类还得每天轮班倒。
这种规模的操作可能是学术实验室里想都不敢想的。
不仅如此,从视频中Optimus们正在执行的任务来看也是多种多样,有分拣电池的,有叠衣服的,还有整理物品的。
Milan Kovac表示特斯拉在其中一家工厂已经部署了几个机器人,它们每天正在真实的工作站接受测试并不断改进。
总而言之,Optimus单是从视觉和人类示范来进行训练来看,这一点上是和特斯拉汽车的逻辑是有点类似了。
在视频的最后,官方还曝出Optimus另一个能力上的提升——可以走更远的路了:
One More Thing
Jim Fan的实验室也在这两天放出了一个新进展——
让机器狗踩着瑜伽球行走!
而它的训练方法和特斯拉Optimus截然不同,是完全在模拟环境中进行,然后零样本迁移到真实世界中,无需微调,直接运行。
具体背后的技术则是团队新推出的DrEureka,它是以之前五指机器人转笔背后的技术Eureka为基础。
DrEureka是一个LLM智能体,可以编写代码来训练机器人在模拟中的技能,并编写更多的代码来弥合困难的模拟与现实之间的差距。
简而言之,它完全自动化了从新技能学习到现实世界部署的流程。
而相较于特斯拉Optimus和英伟达机器狗的训练方式,Jim Fan也做了个灵魂总结:
远程操作是解决类人机器人问题的必要但不充分的条件。从根本上说,它无法扩展。
并且也有网友对此表示认同:
那么你觉得呢?
参考链接:
[1]https://twitter.com/Tesla_Optimus/status/1787027808436330505
[2]https://twitter.com/DrJimFan/status/1787154880110694614
[3]https://twitter.com/DrJimFan/status/1786429467537088741
[4]https://twitter.com/_milankovac_/status/1787028644399132777
字节小游戏平台摸摸鱼将关闭 运营时间不到3年
摸摸鱼游戏平台在微信公号上发布公告,宣布将于2024年3月29日结束运营,届时虚拟资产将不再有效。公告中提到,玩家如果想继续玩已下载的游戏,可以从正规的应用商店或游戏官方网站等渠道重新安装相同的游戏软件,但是摸摸鱼平台无法为每个游戏提供游戏账号转移的解决方案,游戏账号和游戏进度可能会丢失。站长网2024-01-30 17:34:410000微信上线“分分捐”功能:付款有小数可凑整 顺手捐赠
快科技9月1日消息,微信支付宣布,今天起,大家用微信支付买东西时,如果付款金额含有小数,可以自主选择凑整捐给公益项目。据了解,该功能名叫分分捐”功能。当微信支付金额超过5元且为非整数的订单(红包、转账等场景除外)可以看到分分捐”入口,点击入口进入分分捐”,选择具体的公益项目并经过你确认后,可把几毛几分的零钱凑个整”捐出去。微信强调:不会在用户不知情下,自动、静默捐,每次捐均需用户确认。站长网2023-09-01 15:44:370000Adobe全力冲刺人工智能!员工:自掘坟墓
快科技7月26日消息,今年早些时候,设计行业巨头Adobe宣布,推出AI图像生成工具Firefly,帮助用户通过简单的文本描述修改或生成图形。对于Adobe这一积极备战人工智能的行为,一些Adobe员工表达出了明显的不满,认为这是在自掘坟墓”。站长网2023-07-26 21:49:540000阿里魔搭社区开源LLM开发框架ModelScope-Agent
魔搭社区推出适配开源大语言模型(LLM)的AIAgent(智能体)开发框架ModelScope-Agent。站长网2023-09-06 17:35:580000AI芯片创企Taalas获5000万美元融资 定制专用芯片助力AI模型
据外媒SiliconANGLE报道,由Tenstorrent创始人LjubisaBajic领导的AI芯片创企Taalas已成功完成两轮共计5000万美元的融资,旨在为特定AI模型打造定制化专用芯片。图源备注:图片由AI生成,图片授权服务商Midjourney站长网2024-03-11 16:19:280000