在”12 Days of OpenAI”活动的最后一天,OpenAI 今天宣布即将推出 o3 系列推理模型。 与现有的 o1 系列类似,o3 系列将包括 o3 和 o3 mini 模型。OpenAI 还分享了 o3 型号的一些基准数据。

 


OpenAI推出o3和o3 Mini推理模型 明年初向公众开放

  • o3 在 ARC-AGI 半私密评估中的得分突破了 75.7%。 采用高计算配置的 o3 在半私密评估中获得了 87.5% 的分数。
  • 在 EpochAI 前沿数学基准测试中,o3 解决了 25.2% 的问题,而现有模型只解决了 2%。
  • 在 SWE-Bench Verified 测试中,o3 获得了 71.7 分,比 o1 高出 22.8 分。
  • 在 Codeforces 上,o3 的 Elo 评分为 2727。
  • 在 AIME 2024 中,o3 获得了 96.7% 的分数。 相比之下,o1 的得分是 83.3。
  • 在 GPQA Diamond 中,o3 得分为 87.7%。 相比之下,o1 的得分为 78%。

ARC 奖团队就 OpenAI 的新 o3 模型评价如下:

OpenAI 的新 o3 模型代表了人工智能适应新任务能力的重大飞跃。 这不仅仅是渐进式的改进,而是真正的突破,标志着人工智能的能力与之前的 LLM 限制相比发生了质的转变。o3 是一个能够适应从未遇到过的任务的系统,可以说在 ARC-AGI 领域接近人类水平。

o3 迷你模型将为用户提供在三个推理级别之间进行选择的选项: 高、中、低三个推理级别。 低级别速度最快,但准确度较低,而高级别速度最慢,但准确度较高。

OpenAI 尚未发布 o3 模型。 不过,从今天开始,它已开始共享 o3 模型,用于安全测试。 有兴趣的安全和安保研究人员也可以申请在公开发布之前使用 o3 模型。 o3 模型预计将于 2025 年向公众开放。

声明:本站所有文章或资源,均来自互联网分享。本站不参与制作或存储,内容仅用于互联网爱好者学习和研究,如不慎侵犯了您的权利,请及时联系站长处理删除。敬请谅解!