ChatGPT Agent多项测试跑分破纪录 HLE测试获41.6%

ChatGPT Agent多项测试跑分破纪录 HLE测试获41.6%

【CNMO科技消息】7月18日,Open AI首席执行官Sam Altman和四位研究员在直播中正式发布了ChatGPT Agent——一款通用型AI智能体。CNMO获悉,在HLE测试中,ChatGPT agent拿下了41.6%高分,并在数学FrontierMath基准上刷新了SOTA,碾压o4-mini和o3模型。

Sam Altman(最右)及他的团队

ChatGPT Agent融合了Operator、Deep Research和ChatGPT三大模块优势,能够自主完成网页浏览、数据分析、PPT制作等复杂任务。

ChatGPT Agent在HLE测试中获得41.6%的高分,采用并行八路推理并选取置信度最高答案后可提升到44.4%。在数学基准测试FrontierMath中,以27.4%的准确率刷新了纪录。

在Excel编辑能力的SpreadsheetBench测试中,ChatGPT agent的表现同样远超现有模型。当获得直接编辑权限时,以45.5%的得分显著超越Excel Copilot的20.0%。此外,它还在BrowseComp、WebArena等浏览评测里均刷新了SOTA。

据悉,该产品已面向Pro、Plus和Team用户开放。Pro用户可以马上使用,Plus与Team用户将在数日内陆续开通,Enterprise与Education版本将于数周后接入。

猜你喜欢

盘点娱乐圈8位地母系长相典型代表,95后小花竟然就上榜两位!

地母系长相究竟是什么样的呢? 首先是巩俐(1965年),她无疑是地母系长相的典范。 接着是林青霞(1954年),令人惊讶的是,她已经71岁了,光阴荏苒,令人感慨不已。张曼玉(1964年)也展现了一种独特的东方…

盘点娱乐圈8位地母系长相典型代表,95后小花竟然就上榜两位!

琥珀环保取得高效细格栅污水过滤机专利,解决现有装置清洁后需拆卸清理影响效率问题

金融界2025年7月17日消息,国家知识产权局信息显示,琥珀环保技术(中国)有限公司取得一项名为“一种高效细格栅污水过滤机”的专利,授权公告号CN223102773U,申请日期为2024年09月。 专利摘要显…

琥珀环保取得高效细格栅污水过滤机专利,解决现有装置清洁后需拆卸清理影响效率问题

JRT激光测距传感器通过RS485转PROFIBUS-DP网关开启一次自动测量模式

本文将围绕RS485转PROFIBUS-DP网关与JRT激光测距传感器的协同应用展开分析,通过实际场景拆解技术实现路径,为工程师提供可参考的解决方案。 通过上述案例可见,RS485转PROFIBUS-DP网关…

JRT激光测距传感器通过RS485转PROFIBUS-DP网关开启一次自动测量模式

萧敬腾伦敦偶遇, 与歌迷合照紧搂林有慧, 依恋老婆尽显无遗

在不久前的一次采访中,萧敬腾曾提到他好友方大同对著名音乐家Stevie Wonder的热爱,萧敬腾感慨道:“他比我们更爱,这是他的灵魂。”林有慧在50岁时与萧敬腾步入婚姻,而她对孩子的喜爱也显而易见。此刻,…

萧敬腾伦敦偶遇, 与歌迷合照紧搂林有慧, 依恋老婆尽显无遗

张与辰刘洋首登红馆声势壮大,罗嘉良温兆伦难忘沾叔提点掌声致敬

张与辰刘洋首登红馆声势壮大,罗嘉良温兆伦难忘沾叔提点掌声致敬