简单问题让GPT-5陷入混乱

快速阅读: 波莫纳学院教授加里·史密斯测试GPT-5，发现其在旋转井字游戏中表现不佳，表达冗长且常出错，与OpenAI宣称的接近人类智能不符。

OpenAI 首席执行官萨姆·阿尔特曼一直宣称公司最新的大型语言模型 GPT-5 接近人类智能水平，但在实际测试中，它往往显得异常笨拙，尽管表达冗长。

波莫纳学院经济学教授加里·史密斯最近在《心智问题》杂志上展示了一项实验，证明了这一点。他建议与 GPT-5 玩一种“旋转井字游戏”。这种游戏非常简单：游戏开始前，网格顺时针旋转 90 度。常识告诉我们，这不会改变游戏的本质；仍然是一个三乘三的网格，规则相同。

然而，GPT-5 却发表了一番冗长的评论：“玩家习惯了‘直立’的井字游戏板，旋转可能会微妙地改变他们识别威胁和机会的方式。” GPT-5 还表示，“数学上，旋转游戏板 90 度不会改变可能的胜利组合——从结果上看，这仍然是同一款游戏。但从心理上讲，感觉可能会不同。”

GPT-5 继续声称，选择中心位置仍然是最强的开局策略，尽管传统游戏理论认为角落位置更有利。GPT-5 补充道：“当方向改变时，玩家可能会错误评估边缘和角落的移动。” 这种说法并不成立。

史密斯接着问 GPT-5，旋转网格是否会使人类更难玩好游戏。GPT-5 回答说：“从纯策略角度看，旋转游戏板不会改变任何东西。每一行、每一列和每一条对角线的胜利组合只是映射到另一条胜利组合。所以，对于人工智能或完美策略的玩家来说，旋转井字游戏与标准井字游戏完全相同。”

尽管如此，GPT-5 接着说：“对于人类来说，情况就不同了。” 到这时，GPT-5 的长篇大论听起来更像是 OpenAI 的受欢迎模型 GPT-4，而非最初以简洁著称的 GPT-5。这可能是由于公司决定让新模型更加“温暖友好”，以回应用户对取消切换模型选项的不满。

史密斯的实验记录显示，GPT-5 在这次测试中犯了一些明显的错误，这与 OpenAI 最近声称的新模型“交流起来不再像‘与人工智能对话’，而更像是与拥有博士学位的朋友聊天”相矛盾。

特别是当 GPT-5 提出“实际上绘制带有位置标签的旋转井字游戏板，以便你能看到每次变换如何影响识别”时，史密斯同意了。然而，GPT-5 生成的图像完全混乱，不仅充满拼写错误，还有一些毫无意义的空白网格。

史密斯显然已经受够了，他没有回应这些图像。他在专栏中写道：“人们常说狗长得像它们的主人，Chat GPT 很像萨姆·阿尔特曼——总是自信满满，却常常出错。”

关于 GPT-5 的更多信息：

在 GPT-5 灾难性发布后，萨姆·阿尔特曼转向宣传 GPT-6。

(以上内容均由Ai生成)