在如今AI无处不在的时代,许多人认为AI已经无所不能了。
AI代写文章、代写代码、AI绘画甚至AI制作PPT等功能,可能会让你觉得AI已经超越了人类。
然而,最新的一个研究表明,AI在处理一些简单的逻辑推理问题时,水平甚至还不如小学生。
这就是“爱丽丝梦游仙境”测试,研究人员设计了一项名为“爱丽丝梦游仙境”(AIW)的测试。
这个测试对我们来说并不算难:“爱丽丝有N个兄弟,她还有M个姐妹,请问爱丽丝的兄弟有多少个姐妹?”
只需稍加思考,答案显而易见:M+1(爱丽丝的姐妹数量加上爱丽丝自己)。
然而,当研究人员让当前最先进的语言模型如GPT-3.5/4、Claude、Llama等回答这个问题时,结果却令人吃惊。