波士顿动力、特斯拉,你们的劲敌终究还是来了
三个技术关键词:大语言模型、 Sim2Real 和 NeRF 技术,然后“一气呵成”。
“潜水”两年后,以色列人形机器人公司 Meetee Robotics 发布了首款双足人形机器人 MenteeBot 原型视频。MenteeBot 身高1.7米,体重约70公斤,展示了端到端完成任务的能力——走到厨房将水果放到盒子里,然后将盒子放到指定位置。整个流程,导航、运动、场景理解、物体检测、抓取和自然语言理解,一气呵成。
值得注意的是,视频中的 MenteeBot 并不是通过一个命令来完成该任务的。人类首先告诉它去厨房,等机器人到了厨房后,再向它发出收拾水果的指令。机器人能否一次性完成同样的任务还有待观察。不过,Mentee Robotics 也指出,这还不是准备部署的最终版本。
Meetee Robotics 是一家颇有来头的初创公司,核心创始人 Amnon Shashua 是耶路撒冷希伯来大学的计算机科学教授 ,也是全球最大高级驾驶辅助系统( ADAS )供应商 Mobileye 的创始人。Mobileye 曾是特斯拉的核心供应商,2017年被英伟达以153亿美元收购。后来,英特尔又以167亿美元的价格将其送到纳斯达克。
Amnon Shashua 现在仍是 Mobileye CEO ,也是好几家知名 AI 公司创始人之一。其中,AI21Labs 作为最早将生成式 AI 带给大众的公司之一,也被视为 OpenAI 的强劲对手。
这位教授的头衔可真多啊.......几乎都站在了技术前沿上
基于这位核心创始人的经历,几乎可以预判 Mentee Robotics 核心技术至少覆盖两个重要领域。一个是生成 AI,当下最令人兴奋的 AI 研究优势就是大语言模型和机器人的结合,他也创建了一家生成式 AI 公司。另一个肯定与计算机视觉有关(想想自动驾驶),MenteeBot 可能仅使用基于视觉的摄像头来感知周围世界。
事实上,也正如 demo 所展示的,由于集成了大型语言模型,MenteeBot 能理解自然语言命令,执行任务,就像一个可以听懂你的话,完成任务的小助理。接下来,由于三维重建技术神经辐射场( neural radiance fields,NeRF )已成为自动驾驶必不可少的关键技术之一,MenteeBot 也毫无悬念地采用了这一技术。有了 NeRF ,机器人就像获得了 "3D 视觉" 能力,在接收到人类命令后,接着像人一样实时感知和理解周围环境,并定位自身,同时规划动态路径以避开障碍物。最后,机器人使用模拟器到现实 (Sim2Real) 机器学习方法,将模拟环境下规划的运动通过步态和手部运动应用到现实世界中,走向目的地、完成抓取任务。
Amnon Shashua表示,机器人的每个层面都集成了 AI。将这些技术无缝集成,MenteeBot 就能够执行完整的任务流程——从理解人类的指令,到感知和分析环境,再到规划和执行任务,一气呵成。
从官方公布的另外两个视频来看,你会发现,心灵手巧是 MenteeBot 另一个特点(如下)。据说,工程团队还开发了专有电机来增加机器人的灵活性。视频中,机器人可以握住并将不同家用物品递给人而不损坏它们,可见手部非常灵活,动作也精准,适合做一些精细的家务活儿。
在下面这个搬运重物的视频中,Mentee Robotics 展示了类似人类的平衡能力和控制力,在搬运重物时会自动调整步态保持平衡,比如侧身行走或者弯曲关节部分。
两年前,Amnon Shashua 等人创立了 Mentee Robotics。公司在新闻稿中称,“我们正处于计算机视觉、自然语言理解、强大而详细的模拟器,以及从模拟到现实世界方法走向融合的风口浪尖。” 这种融合也构成了打造通用双足机器人的起点,它可以自由在人类环境中行动,做家务,从模仿中快速学习。
除了 Shashua,创始团队还包括 CEO Lior Wolf (也是前 Facebook AI 研究总监)以及 CTO Shai Shalev-Shwartz,他也是以色列耶路撒冷希伯来大学教授、现任 Mobileye CTO。到目前为止,该团队已经帮助该公司筹集了1700万美元。
Mentee Robotics 也在下一盘很大的棋,他们的人形机器人产品将分为两个版本。一个准备进入千家万户,操持家务,能透过自然语言和视觉能力,快速学习新技能。另一个仍然面向工业场景,比如物流仓库。MenteeBot 最多可承载50斤左右重的负荷,一次充电可运行长达5小时。Mentee Robotics 计划在2025年第一季度推出一款可量产的原型。虽然价格成谜,但据说还是“负担得起”。
参考链接
https://www.menteebot.com/
北京拟禁止直播平台销售保健品 不得以全网最低价误导消费者
近日,北京市市场监督管理局发布《北京市直播带货合规指引(征求意见稿)》,《指引》要求直播带货直播间运营者、直播带货人员和直播带货服务机构在直播中发布商业广告,应按规定严格审核把关。站长网2024-06-14 00:28:430000谷歌推出文生视频模型Veo:对标Sora 时长超 1 分钟
在今日举行的谷歌2024I/O开发者大会上,谷歌正式推出了备受瞩目的全新视频生成模型——Veo。这款产品被视为对OpenAI三个月前推出的文本转视频工具Sora的直接挑战,旨在为用户提供更加高质量、多风格的视频生成体验。站长网2024-05-15 08:19:460000DeepSeek深度求索发布开源代码大模型DeepSeek Coder
DeepSeek(深度求索)是一个专注于探索AGI(通用人工智能)本质的团队,最近发布了开源的代码大模型DeepSeekCoder。DeepSeekCoder是一个智能代码助手,可以生成各种代码,包括贪吃蛇游戏、2048游戏、测试样例、修bug、SQL查询等。DeepSeekCoder还在国际权威数据集的测试中表现出色,领先其他开源模型。站长网2023-11-06 08:43:480004今天是小米SU7发布99天:雷军和团队聚餐庆功
快科技7月4日消息,小米创办人雷军发微博表示,今天是小米SU7发布99天,我们办了一个总结会,大家也聚餐庆祝一下。资料显示,小米SU7于3月28日发布,4月3日开始交付,起售价格21.59万元。从6月开始,小米汽车实现双班生产,单月交付已突破10000辆,从7月1日起,小米SU7系列交付进一步加速,锁单后预计交付周期最高可缩短5周。站长网2024-07-04 22:21:570000春节期间理想超充桩迎来多辆蔚来汽车充电 李想:开门营业来的都是客
快科技2月14日消息,近日,有博主发现春节期间理想超充桩迎来很多蔚来汽车充电,理想汽车董事长兼CEO李想对此表示,开门营业,来的都是客。春节期间,有网友在高速服务区遇到多辆汽车在换电站排队充电。其中,理想超充站的充电桩除了理想汽车,大多是蔚来汽车在充电。该博主说:以后谁也别说谁了,大家一起卷补能基建设施吧”。站长网2024-02-15 10:01:100000