谷歌推出通用AI代理SIMA:3D游戏世界的全能AI玩家
划重点:
🤖 无需源代码或API,SIMA通过文本和图像提示执行操作
🎮 与多个游戏工作室合作,SIMA在多款3D游戏中展现卓越性能
🔍 由多种大模型组成的SIMA,模仿人类感知、思考、规划和执行
正文:
近日,谷歌DeepMind的研究团队宣布推出一款面向3D虚拟环境的通用AI代理——SIMA。这一创新成果标志着AI技术在游戏领域的应用迈出了重要一步。SIMA的独特之处在于,它能够无需游戏的源代码或定制API,仅依赖于用户提供的图像和简单文本指令,就能像人类玩家一样在游戏世界中自由行动。
SIMA的研发过程中,DeepMind与八家游戏工作室紧密合作,将其在《无人深空》、《模拟山羊3》、《Teardown》、《挖矿模拟器》等多款知名3D游戏中进行了广泛测试。测试结果显示,SIMA能够执行超过600种基本操作,包括挖矿、驾驶飞船、制作装备等,且每项操作的完成时间平均不超过10秒。
SIMA的架构设计灵感来源于人类的身体构造,由多种大模型组合而成。其中,视觉感知模型相当于AI的“眼睛”,负责处理图像观察并提取关键信息;大语言模型则是“大脑”,解析和理解自然语言指令;建模规划模型扮演“思维”的角色,通过强化学习规划最佳行动策略;最后,控制和执行模型作为“四肢”,将动作序列转化为实际的游戏控制指令。
在数据收集和预处理方面,SIMA采用了先进的技术手段。研究人员从商业游戏中收集了大量数据,并通过数据清洗、转换和标准化等步骤,确保了数据的质量和一致性。这些工作为SIMA的学习和执行提供了坚实的基础。
谷歌DeepMind的研究人员表示,他们将继续迭代和提升SIMA的通用代理能力,期望未来SIMA能在现实生活中为用户提供更多帮助。
技术报告:https://storage.googleapis.com/deepmind-media/DeepMind.com/Blog/sima-generalist-ai-agent-for-3d-virtual-environments/Scaling%20Instructable%20Agents%20Across%20Many%20Simulated%20Worlds.pdf
男子总结今年春节三大反常现象:短信微信拜年少了 很多人不再发红包
2月13日消息,一眨眼已经是大年初四了,春节假期过去了一大半了,大家感觉这个春节假期如何?最近,有网友总结了今年春节的三大反常现象,居然得到了网友出奇的认可,如果不说你能get到吗。按照这位网友的总结,今年春节三大怪象,短信微信拜年少了很多,放烟花多了很多,很多人不再集五福发红包。有网友也是直言,肉眼可见的,人越活越清醒,仔细想想确实是这么个道理。0001快手投入了一个600亿的大项目
哪里是电商的最后一片蓝海?无论是国货大佬安踏,还是行业新贵蕉下、追觅,大家都在寻找能带来交易增量的运营阵地。面对即将到来的电商旺季,户外生活方式品牌蕉下成为在快手平台上较早尝到甜头的商家。今年4月,蕉下通过川流计划,实现品牌的曝光环比增长65%,当月GMV增长20%,早布局、提前锁住流量和用户,蕉下成功为即将到来的年中大促蓄水。站长网2023-05-13 09:41:440000微软创新项目Project Rumi:多模态AI项目助力理解人类意图
ProjectRumi是微软的一个项目,旨在通过解决大型语言模型(LLM)理解非语言线索和上下文细微差别的局限性,增强LLM的能力。站长网2023-08-07 09:57:510000快手:已开始研发超千亿规模大模型以及多模态大模型
在昨日的电话会议上,快手首席执行官程一笑表示,今年初,快手启动了新的AI战略,并设定了战略目标,希望确保自己在可能到来的新技术突破中保持国内领先地位。具体来说,快手研发的“快意”130亿和660亿大模型已达到了行业内同等规模的领先水平。他们已经开始研发超过千亿规模的语言大模型以及多模态大模型。站长网2023-11-22 14:10:060000比起Alphabet,AI革命可能对亚马逊和 Meta 更有利
**划重点:**🌐人工智能可能成为数字平台的下一个重要步骤,可能在某些地方甚至取代传统互联网。💡分析师指出,亚马逊和Facebook旗下的Meta平台在这一未来中看起来比谷歌的母公司Alphabet更具投资价值。0000