爱丁堡大学研究表明“最先进的 AI 无法读取时钟或日历”
快速阅读: 据《爱丁堡现场》称,研究显示,先进AI在识别时间方面遇到挑战,如解读指针式时钟和回答日历问题。即使在最佳情况下,AI的指针位置判断准确率仅达四分之一,日期计算错误率也高达20%。研究人员呼吁解决这些基础技能问题,以推动AI在日程管理等领域的实际应用。
爱丁堡的一项研究指出,一些全球最先进的人工智能系统在辨认时间方面遇到了困难。尽管这些AI模型能够完成撰写文章和生成艺术作品等复杂任务,但在处理一些人类轻松完成的基本技能上却显得力不从心。爱丁堡大学信息学系的研究团队发现,当前最先进的AI模型无法稳定地解读指针式时钟的位置或准确回答关于日历日期的问题。理解指针式时钟和日历不仅需要空间感知能力,还需要上下文理解和基础数学知识的结合,这是AI目前尚未完全攻克的难题。
研究人员认为,若能解决这一问题,将使AI系统在日程安排助手、自主机器人以及为视障人士开发的工具等对时间敏感的应用场景中发挥更大的作用。研究团队测试了多种处理文本和图像的AI系统(即多模态大型语言模型,MLLMs),考察其是否可以通过观察指针式时钟或日历的图片来回答与时间相关的问题。他们尝试了各种时钟设计,包括带有罗马数字和无罗马数字的时钟,配备秒针与未配备秒针的时钟,以及不同配色的表盘。
研究结果显示,在最佳情况下,这些AI系统对指针位置判断的准确率不到四分之一。当指针式时钟带有罗马数字或风格化的指针时,错误率更高。研究人员进一步发现,即便移除秒针,AI系统的性能并未显著提升,这表明AI在指针检测和角度解析方面存在根本性的问题。
此外,研究团队还让AI模型回答了一系列基于日历的问题,例如确定节假日和计算过去及未来的日期。研究发现,即便是表现最好的AI模型,日期计算错误率也高达20%。这一研究成果将在2025年4月28日于新加坡召开的第十三届国际学习表征会议(ICLR)的“推理与规划大型语言模型研讨会”上作为一篇经过同行评审的论文发布。
负责此项研究的爱丁堡大学信息学系罗希特·萨克塞纳博士表示:“大多数人从小就学会了如何读取时间和使用日历。”他补充道:“我们的研究结果揭示了AI在执行基础技能方面的不足之处。若想将AI系统成功融入日程管理、自动化以及辅助技术等时间敏感型的实际应用中,这些问题必须尽快得到解决。”
信息学系的阿尔约·格玛同样强调:“当今的AI研究往往聚焦于复杂的推理任务,然而讽刺的是,许多系统在处理更简单、更日常的任务时依然存在障碍。我们的研究结果表明,是时候填补这些基本的知识空白了。否则,将AI技术引入实际的、时间敏感的应用场景将会受到严重阻碍。”
请订阅《爱丁堡生活》新闻简报,获取更多头条资讯。如果您希望第一时间接收最新消息,还可以加入爱丁堡生活WhatsApp群组。同时提醒您关注西洛锡安消防队近期参与的紧急救援行动,了解更多动态。
(以上内容均由Ai生成)