数学题后面加一句“猫一生大部分时间在睡觉”,推理模型就更容易答错?一篇 2025 年论文这样说
TL;DR:2025 年的一篇论文发现,在数学题末尾附上与题目无关的短句,比如“有趣的事实:猫一生大部分时间都在睡觉”,会让推理模型更容易答错。论文摘要称,这类触发语使目标模型答错的概率上升超过 300%,猫的那一句单独就能让错误概率翻倍以上。需要注意的是,这是相对增幅,基线错误率本来很低,并不是“模型一加猫就大面积崩溃”。 时间线:这篇论文《Cats Confuse Reasoning LLM》于 2025 年 3 月在 arXiv 首次提交,同年 7 月更新到 v2,后被