OpenAI科学家震惊TED大会:让AI模型思考20秒,提升10万倍性能!
今天凌晨,知名科技媒体Venturebeat消息,OpenAI高级研究科学家、德扑AI之父Noam Brown,在美国旧金山举办的TED AI大会上提出了一个震惊的理论——让AI模型思考20秒所带来的性能提升,相当于将模型扩大100,000倍并训练100,000倍的时间。
最初,Brown也被这个结果吓到了,还写了多篇论文来验证其真实性。他发现“系统二思维”(System2thinking)才是让AI模型性能大幅度提升的关键所在。而OpenAI最新发布的o1模型同样引入了这个技术概念,并且获得了非常出色的性能提升。
Brown在演讲中表示,过去5年AI能获得巨大提升可以用一个词来概括——规模。但如今的前沿AI模型仍基于2017年推出的Transformer架构,主要区别在于数据规模和计算能力。
现在是时候进行训练、推理范式转变了,AI模型需要超越单纯的数据预处理,进入 “系统二思维”模式,以一种更慢、更审慎的拟人化推理形式来解决超复杂的难题。
系统二思维介绍
“系统二思维”是一个心理学概念,描述了人类处理复杂问题时所采用的深度思考方式。这个概念最初由心理学家Daniel Kahneman在他的著作《思考,快与慢》中提出,用来解释人类大脑的两种不同的思考模式。
在Kahneman的理论中,系统一思维是快速、直觉、自动的,它处理日常的、熟悉的任务,比如识别熟悉的面孔或者理解简单的句子。
这种思维方式不需要我们有意识地思考,它依赖于我们的直觉和经验,但有时也可能导致错误,因为它不涉及深入的逻辑推理。
而系统二思维则是缓慢、逻辑、努力的,它涉及到深思熟虑、计算和推理。当我们面对复杂的、新颖的或者需要深入分析的问题时,就会启动系统二思维。这种思维方式需要我们集中注意力,消耗更多的认知资源,但它可以帮助我们做出更准确和深思熟虑的决策。
Brown直接将这个概念应用到AI领域,提出了一个革命性的想法:通过模拟人类的系统二思维,AI模型可以在不增加大量数据或计算资源的情况下显著提升性能。
以他开发的战胜人类的德扑AI Libratus为例,仅让AI在每手牌中思考20秒,就能获得与将模型扩大100,000倍相同的性能提升。这种方法的核心在于让AI模型在做出决策前进行更深入的分析和推理,而不是仅仅依赖于大规模数据和计算。
而OpenAI最新发布的o1模型同样引入了系统二思维,能够进行深度推理,模仿人类逐步解决问题的过程,通过自我对弈等强化学习训练方式提升推理能力。
例如,在国际数学奥林匹克资格考试中,o1模型凭借系统二思维准确推理复杂数学公式取得83%的准确率,远高于GPT -4o的13%。这对于金融、医疗、科研、编码等对数据要求严谨的行业来说非常重要。
所以,系统二思维对于增强大模型的能力有很多好处,使其能够更好地适应新的、未见过的任务和环境。在面对错误、不确定性和异常情况时,系统二思维还可以帮助大模型变得更加鲁棒,因为它鼓励模型采取更加谨慎和保守的策略。而在人机交互方面,模拟系统二思维能帮助大模型可以更好地理解和预测人类用户的需求和意图,从而改善交互体验。
关于Noam Brown
Brown曾就职于FAIR(Meta)在那里他和同事共同开发了 CICERO,这是首个在策略游戏外交中达到人类水平表现的AI。他还与卡内基梅隆大学的导师一起创建了 Libratus 和 Pluribus,这两个AI在人机对战比赛中战胜了顶尖人类德扑职业选手。
Libratus获得了AI杰出成就马文・明斯基大奖,Pluribus 则登上了《科学》杂志封面,并成为2019年《科学》年度突破奖的亚军。Brown还被评为麻省理工科技评论35位35岁以下创新者之一。
目前,Brown是OpenAI的高级研究科学家主要方向是超复杂推理、AI Agent以及自我对弈。
IDC:预计2027年 中国商业智能软件市场规模将达到19.7亿美元
IDC《2022下半年中国商业智能软件市场跟踪报告》显示,2022下半年中国商业智能软件市场规模为5.1亿美元。2022全年中国商业智能软件市场规模达到8.8亿美元,同比增长13.8%,远低于2022上半年的预测数据。2022下半年,中国商业智能市场前十大厂商占比共计66.9%。前10名厂商中本土品牌占据6位。站长网2023-07-28 13:54:100000视频号“开闸”本地生活,不想摸着美团抖音过河
本地生活新玩家视频号决定再往前迈一步。从内测到全面放开视频号对本地生活的探索已经有一年时间。去年5月,视频号开始小范围测试本地生活业务,只有部分大品牌商家入驻。有消息人士表示,在内测早期,视频号的测试数据一般,当时只有三四十家品牌商家参与测试。0003Create2024百度AI开发者大会 李彦宏:未来应用开发像拍短视频一样简单
在今日盛大举行的2024Create百度AI开发者大会上,百度创始人、董事长兼CEO李彦宏发表了振奋人心的演讲。他强调,随着AI技术的蓬勃发展,如今即便不会编写代码,人们也能创造出丰富的应用;无需编程,亦能打造智能手机,AI正掀起一场前所未有的创造热潮。站长网2024-04-18 16:15:390000萝卜快跑回应车内有摄像头:满足测试和监管的安全需求
近期,百度推出的无人驾驶出租车服务“萝卜快跑”成为了热门话题,许多网友分享了自己的搭乘体验,并对这一新兴服务表现出浓厚的兴趣。然而,随着服务的火热,一些网友提出了关于车内监控摄像头可能涉及的乘客隐私问题。对于这一疑虑,萝卜快跑的客服团队解释称,车辆上安装摄像头主要是为了满足测试监管和测试过程中的安全性需求。除非乘客主动请求查看监控视频,否则公司不会对录像数据进行搜集、存储或使用。站长网2024-07-11 17:56:270001