OpenAI甩王炸!发布新模型o3,一夜再次改变世界!
今天凌晨2点,OpenAI开启第12天技术直播,也是最后一天。不负众望终于整了个大的,发布全新预览版模型——o3。
根据发布的o3测试数据显示,美国AIME数学竞赛中达到了96.7分,大幅度超过了o1预览版的56.7和o1的83.3%,仅错了一道题相当于一名顶级数学家的水平。
而在ARCAGI的测试中,o3在低算力资源情况下实现了75.7%,而当增加计算资源后实现了87.5%,这也是首次有大模型超过了人类85%的水平,实现重大技术突破。
有意思的是,OpenAI直接跳过了o2发布了o3,主要原因是名字与英国著名电信公司o2发生了冲突无法使用,所以才直接来了个第三代~
o3主要测试数据
在软件风格基准测试中,由真实世界软件任务组成的3benchverified基准测试里,o3模型准确率达到71.7%,相比o1模型提升超过20%。
在竞赛代码领域,o3模型在CodeForces竞赛编码网站上表现卓越,达到了约2727的ELO分数,远超o1模型的1891分,甚至超越了OpenAI首席科学家Yakov的分数,接近公司内部顶尖编程高手的水平,这表明o3在处理复杂编程竞赛任务时具备出色的逻辑推理和算法实现能力。
在数学能力测试中,o3模型在Amy考试中的准确率高达96.7%,而o1模型为83.3%。在这个被视为美国数学奥林匹克预选考试的高难度测试中,o3模型通常仅错一题,表现十分出色。
在衡量模型在博士阶段科学问题处理能力的GPQADiamond基准测试中,o3模型取得了87.7%的准确率,比o1模型的78%提高了约10%,甚至超越了领域专家博士通常能达到的70%的水平,这表明o3模型在数学和科学领域的复杂问题处理上已接近甚至超越人类专家水平。
在ARCAGI基准测试中,o3模型取得了重大突破。在低计算条件下,o3模型在ARCAGI的半私有保留集上得分为75.7,这一成绩在符合计算要求的同时,成为了新的行业领先水平。
当进一步提升计算能力,让o3模型进行更长时间的思考时,其在同一隐藏保留集上的得分更是高达87.5%。这一成绩尤为重要,因为人类在该测试中的表现阈值约为85%,O3模型的得分超过了这一阈值,标志着人工智能在该领域取得了新的里程碑。
此前,ARCAGI版本一花费了五年时间,才使领先的前沿模型从0%提升到5%,而o3模型的出色表现无疑展示了OpenAI在人工智能技术研发上的巨大进步。
o3Mini版本
与o3模型相比,o3Mini模型在性能与成本平衡方面表现出色,能够以较低的成本提供高效的服务。
在编码评估方面,o3Mini模型展现出了出色的性能提升。在CodeForces的评估中,随着思考时间的增加,o3Mini模型的表现不断提升,逐渐超越了o1Mini模型。
在中位思考时间下,o3Mini模型的性能甚至优于o1模型,能够以大约一个数量级的更低成本提供相当甚至更好的代码性能。这意味着开发人员可以在不增加过多成本的情况下,获得更高效的编程辅助,提高开发效率,降低开发成本。
在数学能力测试中,o3Mini模型在2024年数据集上表现出色。o3Mini低模型的性能与o1Mini相当,而o3Mini中位数模型则取得了比o1更好的性能。在处理诸如GPQA等困难数据集时,o3Mini模型也能展现出一定的优势,实现了接近即时响应的效果。
此外,o3Mini模型支持函数调用、结构化输出、开发者消息等一系列功能,与O1模型相当。在实际应用中,o3Mini模型在大多数评估中实现了可比或更好的性能。
在现场演示中,o3Mini 模型的强大功能得到了直观展示。例如,在一项任务中,模型被要求使用Python 实现一个代码生成器和执行器。当启动运行该 Python 脚本后,模型成功启动了本地服务器,并生成了包含文本框的用户界面。
用户在文本框中输入编码请求后,模型能够迅速将请求发送至 API,并自动解决任务,生成代码并保存至桌面,随后自动打开终端执行代码。整个过程复杂且涉及大量代码处理,但 o3Mini 模型在低推理努力模式下依然表现出了极快的处理效率。
目前,该模型还处于安全测试阶段,从今天开始o3Mini 模型率先开放给外部安全研究人员进行测试,随后 o3模型也将参与其中。研究人员可通过访问 OpenAI 的官方网站,填写申请表格参与测试。
健身平台Keep登陆港股上市 首日高开近5%
今日,运动科技公司keep正式在港股上市,首日高开近5%,报30.3港元。根据此前公司公告,Keep计划全球发售1083.9万股,其中国际发售975.5万股,占比九成;公开发售108.4万股,另有15%的超额配股权。IPO股票发行价为每股28.92港元,将净筹资1.92亿港元。站长网2023-07-12 17:26:060001阿里云四大金刚简史
阿里集团分拆后,所有人都想知道,谁会成为最先上市的新公司。一定程度上,这代表业务独立性强,潜力大,也更受资本市场欢迎。阿里云智能是热门选手之一。在官方给出的实施方案中,以阿里云和钉钉为核心的云智能业务是拆分最彻底的板块。在股权和公司治理上,是一家与阿里集团完全独立的新公司。时间表也已经给出:未来12个月内完成拆分和上市。站长网2023-06-10 08:59:510000OpenAI前CTO被曝吸金7亿创业,招聘首先挖角老东家
OpenAI前CTOMiraMurati出走后,动向进一步明确——被曝筹备新公司,吸金超1亿美元(约合7亿人民币),且和她同一天离开OpenAI的BarretZoph(前研究副总裁)也可能入局。此前就有消息称,Mira离职后一直在向前司OpenAI的员工抛出橄榄枝。虽然具体创业方向并未明确,但人们已经开始为OpenAI捏一把汗了,竞争对手1??不仅如此,OpenAI最近抓马持续:0000苹果研究团队揭示WRAP技术:用合成数据进行预训练大模型 成本低准确性高
**划重点:**1.🔄**预训练效率提升:**WRAP应用于嘈杂的C4数据集,预训练速度提高了近三倍,显著降低了LLM训练的高昂成本和时间投入。2.🚀**模型性能提升:**WRAP在相同计算预算下使模型性能更出色,通过使用Pile的不同子集,减少了超过10%的歧义,并在13种不同活动的零-shot问题回答准确性上提高了超过2%。站长网2024-02-05 10:42:350000网盘用上大模型后「真香」!压箱底黑照3秒找到,亲朋好友都不淡定了
想不到,有了AI加持,我也有在我司鲨疯的一天!同事的压箱底黑照,被我3秒钟就翻了出来,光速做成表情包先发制人。喏,只需要在网盘的搜索框里输入“大笑的男人”,立马就能检索到相关图像。然后选中想要“攻击”的对象、点击编辑,就能一键加文字变表情包。整个过程相当丝滑,我图都做完了,同事那还在找图呢(doge)。而且这个搜索还能直接理解“什么是表情包”,可以一键找到之前做好的图。站长网2023-07-18 08:52:180000