跳到正文
原文
Simon Willison·· 6 天前AI 评分45

Qwen3.8 27B 用英文单词输出加法结果的评测

Qwen3.8 27B addition in words

AI 导读

Qwen3.8 27B 在用英文单词输出正整数加法结果的评测中,关闭推理时数值准确率为 23.57%。关闭推理的 5,070 个案例中,格式合规率达 96.17%,但大数加法准确率明显下降。开启推理后,每组仅测试一次,169 次尝试中答对 167 次,作者指出再次测试可能得到不同结果。

来源:Simon Willison · simonwillison.net