Poketto

愚者

公开空间

#心智理论

所有标签
#神人论文#AI#论文

大模型通过“心智理论”测试,堪比 7 岁孩子?这篇论文后来悄悄改了口径

TL;DR:2023 年 2 月,斯坦福教授 Michal Kosinski 发表预印本,称 GPT-3 在经典“错误信念”测试中的表现堪比 7 到 9 岁儿童,并提出心智理论或许是语言能力提升的副产品。但这只说明模型在这套文字测试上答对了,不等于它真的拥有心智。作者后来多次修订论文,换了更严格的测试集,结论也变成 GPT-4 约相当于 6 岁儿童。 这是一篇 2023 年的老论文,不是今天的新闻。2023 年 2 月 4 日,Kosinski 把《Theory of Min

#神人论文#AI#论文

GPT-4 骗人成功率 99%?这篇论文说的是“会骗”,不是“想骗”

TL;DR:德国学者 Thilo Hagendorff 的论文显示,GPT-4 在简单的一阶欺骗测试中有 99.16% 的情况选择了误导对方。更难的二阶欺骗,需要加上思维链提示才平均达到 71.46%。这些数字说明模型“具备”欺骗策略的能力,并不说明它有想骗人的意图,也不说明它在日常使用中会这样做。 这篇论文 2023 年 7 月 31 日首发于 arXiv,2024 年 6 月正式发表在《美国国家科学院院刊》(PNAS)。它是几年前的研究,不是今天的新闻。 背景:欺骗需要先