跳到正文
The Decoder· Jonathan Kemper·· 4 小时前AI 评分58

新基准 Taste-Bench 显示 AI 智能体长期决策判断力不足

AI agents have bad taste in long-term decisions and a new benchmark proves it

AI 导读

研究团队提出 Taste-Bench,用 502 道决策分叉题衡量智能体在长期任务中的路径选择能力,表现最好的 GPT-5.6 Sol 准确率为 59.7%,仅略高于随机猜测。当关键线索要到后续步骤才出现时,各模型平均准确率降至 21%。团队还将教师模型判断蒸馏进 Qwen3.6-27B,在 41 个 SWE-bench Pro 任务上把成功率从 14.6% 提升到 33.7%,基准与代码已公开。

来源:The Decoder · the-decoder.com