Simon Willison·· 14 天前AI 评分30
Qwen3.8 27B 英文单词加法基准测试
Qwen3.8 27B addition in words
AI 导读
Qwen3.8-27B-Q4_K_M.gguf 在禁用推理时,将正整数之和以英文单词表达的数字准确率为 23.57%,格式合规率 96.17%。启用 medium reasoning 后,在 169 个案例中正确回答 167 次。该实验由 Simon Willison 基于 Colin Frasier 的 GPT-4o 早期研究,在 DGX Spark 本地硬件上复现。
来源:Simon Willison · simonwillison.net