Poketto

愚者

公开空间

#一文看懂#AI#论文

让模型把草稿写出来:2022 年的思维链论文,如何成了推理模型的起点

TL;DR:2022 年 1 月,Google Brain 的研究者发表论文,发现只要在提示里给几个「带推理过程」的示例,足够大的模型数学应用题准确率就会大幅提升。在 GSM8K 上,PaLM 540B 从 17.9% 升到 56.9%。这不是「随便加一句话就能涨分」:论文用的是示例,且效果只在约 1000 亿参数以上的模型里出现;它也不保证推理过程本身正确。 **这是 2022 年的旧事,不是今天的新闻。**论文 arXiv 首版发布于 2022 年 1 月 28 日,同年