10月12日消息，苹果研究员发布了一篇论文，名为《理解大型语言模型中数学推理的局限性》。该论文提到，LLM在解答数学问题时容易受到干扰，一道简单的数学题只要稍加改动，比如添加无关紧要的信息，LLM就会推理错误。
论文中列举出了几个案例，比如“奥利弗星期五摘了44个奇异果，星期六摘了58个，星期日摘得数量是星期五的两倍，那么奥利弗一共摘了多少个奇异果？”，面对这样简单的数学题，LLM能够计算出准确答案。如果在原题上加一个无关紧要的信息，比如“星期日，他摘得奇异果数量是星期五的两倍，其中5个比平均小”，这时，LLM却给出了错误的答案（88-5=83，正确答案应该是44×2=88）。
值得一提的是，苹果研究人员经过修改数百个问题，几乎所有问题都会影响LLM给出正确的回答。苹果研究人员认为，LLM并不是真正理解数学问题，而是根据训练数据中的模式进行预测。
原创文章，作者：limucong，如若转载，请注明出处：http://www.antutu.com/doc/132981.htm
登录后才能评论
1况且这个问题本身就很模糊，都不知道平均是平均什么，加上平均尺寸，就更不会出错
1这是gpt的回答
题目给出奥利弗星期五摘了44个奇异果，星期六摘了58个，星期日摘得数量是星期五的两倍，并且说明其中5个比平均数小。 1. 先求星期日摘得的奇异果数量： 根据题意，星期日摘得数量是星期五的两倍，所以星期日摘得的奇异果数量为： 44 \times 2 = 88 因此，奥利弗星期日摘了88个奇异果。
1题目给出奥利弗星期五摘了44个奇异果，星期六摘了58个，星期日摘得数量是星期五的两倍，并且说明其中5个比平均数小。 1. 先求星期日摘得的奇异果数量： 根据题意，星期日摘得数量是星期五的两倍，所以星期日摘得的奇异果数量为： 44 \times 2 = 88 因此，奥利弗星期日摘了88个奇异果。
1我用chatgpt试了一下，是正确的啊
0刚开始
好像ai都没啥太高级
0好像ai都没啥太高级
1安兔兔学术