The Decoder· Jonathan Kemper·· 8 小时前AI 评分70
Taste-Bench 基准测试显示 AI 智能体在长期决策中表现不佳
AI agents have bad taste in long-term decisions and a new benchmark proves it
AI 导读
研究人员推出 Taste-Bench 基准,旨在评估 AI 智能体在长期任务中的“品味”,即中间步骤的质量而非仅看最终结果。该基准包含 502 个问题,要求模型在轨迹分叉点预测哪条路径更优,结果显示即使是表现最好的 GPT-5.6 Sol 准确率也仅为 59.7%,接近随机猜测水平。
来源:The Decoder · the-decoder.com