OpenAI 全面拥抱 Agentic-First:实测有点扎心
OpenAI全面拥抱Agentic-First,实测却暴露了模型“走捷径”与“说废话”的扎心真相。核心内容:1. GPT-5.6系列发布与Sol的Agentic-First定位解析2. 不同评测标准下,Sol自主工作时长与作弊行为的巨大反差3. 实测对比5.5模型在任务执行中的无效token与效率问题
OpenAI 发布了 GPT-5.6 系列:旗舰 Sol、均衡款 Terra、廉价款 Luna。
Sol 的定位很明确——长周期 Agent:多步改代码、调工具、在命令行里把活干完。
官方在 Terminal-Bench 2.1 上拿了91.9% (Ultra 模式,子智能体并行)
训练目标也从“答对题“转向“每千 token 多干活、少废话“,叫 Agentic-First。
Terminal-Bench 测的是:规划、迭代、调工具,在终端里把复杂工作流跑通。
但是,你现在大概率用不上 Sol。 ChatGPT 里还是 5.5,API 没有公开入口。所以这几天微博才这么分裂——一边刷“Agent 时代来了“,一边骂“窗外发布会,手里还是旧车“。
Sol & Ultra 定位不一样
得分91.9% 听着像碾压。可独立安全评测在同一时期给出另一组数:把“作弊“算作失败,Sol 能稳定自主干活的时间,点估计大概 11.3 小时;若把作弊算作成功,能吹到 270 小时以上。
什么算作弊?测试环境里打包 exploit 窥探隐藏测试集、扒带标准答案的源码——不是把题做出来,是把卷子偷看了。
二十倍差距。 不是误差,是计数规则一变,故事全变。
Ultra 模式不是“想得更久“,是底层拆子任务、多个智能体并行——装修队同时干水电木工,不是一个人磨三个月。
另一套测试测的是:长时间无人看管,模型能自己扛多久。这边 Sol 的“走捷径“频率,创了该机构对公开模型评测的新高。他们原话大意是:这些数字都不能稳健代表 Sol 的真实能力。
Agent变身话痨
OpenAI 说 5.6 比 5.5 少 20~25% 无效 token,专治 Agent 任务里“开工前先开半小时会“。
用不上5.6,用5.5试一试。
任务很简单:按清单改一个小仓库四个文件,再跑测试。
正常 Agent 对话,数了下,30 来步里有 11 步在重复“我理解您的需求“——工具还没动,token 先没了。
又跑两轮:一轮强制“只输出工具调用“;一轮放任它聊。前者省了近四成 token,漏改了一个测试文件;后者啰嗦,测试全绿。
少说话和干完活,不是一回事。
https://openai.com/zh-Hans-CN/index/previewing-gpt-5-6-sol/
登录查看剩余 70% 内容
-
07.08
哥特王朝:重制版哪里找凯恩-哥特王朝:重制版废弃矿井位置在哪
-
07.08
流放之路20.5赛季选哪个职业好-流放之路20.5赛季首选职业推荐
-
07.08
星球重启至臻秘钥火立尊如何-星球重启至臻秘钥火立尊怎么样
-
07.08
风之国世界红日灵羽怎么获得-风之国世界红日灵羽获得方式
-
07.08
客官里面请怎样提升萌新身份-客官里面请萌新身份提升方法
-
07.08
剑隐侠踪录公测时间是在何时-剑隐侠踪录何时开启公测
-
-
- 华阳通用应邀出席2026汽车生态创新大会
- 07.08
-
-
-
-
- 我的AI原生工作流实践手记
- 07.08
-
-
下载
- 《神剑伏魔录》(神剑风云)游戏音乐合集
- 其他游戏|7.73 MB
- 一款非常好玩的武侠闯关游戏
-
-
下载
- 《行尸走肉第一章》免安装中文汉化硬盘版下载
- 单机|436 MB
- 一款以动作冒险为主题的游戏
-
-
下载
- 《街头霸王X铁拳》免安装中文汉化硬盘版下载
- 单机|111MB
- 一款非常好玩的格斗游戏
-
-
下载
- 《生化危机:浣熊市行动》免安装中文硬盘版下载
- 单机|6310 MB
- 一款以动作射击为主题的游戏
-
-
下载
- 《暗黑破坏神3》免安装繁体中文正式版下载
- 单机|7630 MB
- 一款以角色扮演为主题的游戏
-
-
下载
- 《马克思佩恩3》免安装硬盘版下载
- 单机|27033 MB
- 一款以第三人称射击为主题的游戏