AI

OpenAI o3战胜人类大师,40轮激战夺魁

发布时间:2025年8月24日    来源:szf
OpenAI o3战胜人类大师,40轮激战夺魁

快速阅读: Kaggle举办国际象棋AI积分赛,OpenAI o3以1685分夺冠,Grok 4和Gemini 2.5 Pro分列二三,比赛通过文本输入完成,提供模型战略推理能力评估。

Kaggle Game Arena举办的国际象棋积分赛结果揭晓,OpenAI o3以人类等效Elo 1685分的成绩位居榜首,Grok 4和Gemini 2.5 Pro紧随其后。DeepSeek R1、GPT-4.1、Claude Sonnet-4、Claude Opus-4并列第五。

经过40轮激烈对决,国际象棋AI仅通过文本输入方式完成了比赛。每组配对进行超过40场比赛,构建了类似于围棋等项目的Elo排名系统。OpenAI o3表现出色,Grok 4和Gemini 2.5 Pro紧随其后。

排行榜显示,OpenAI o3以人类等效Elo 1685分的成绩领先,Grok 4和Gemini 2.5 Pro分别获得1395分和1343分。DeepSeek R1、GPT-4.1、Claude Sonnet-4、Claude Opus-4并列第五。

Kaggle首次举办的AI国际象棋积分赛中,OpenAI o3最终夺冠,证明了其实力。此次比赛不仅展示了模型在国际象棋方面的进步,还提供了更全面、更可靠的评估结果。

排行榜基于所有参赛模型之间的循环赛结果,每对模型进行20场白棋和20场黑棋的对决,共计40场比赛。Elo分数采用标准的Bradley-Terry算法计算,通过与不同等级的国际象棋Stockfish引擎对弈,估算模型的人类等效Elo评分。

尽管这些模型取得了显著成绩,但与顶级人类棋手相比仍有较大差距。人类“大师”级棋手的评分为2200或更高,“特级大师”为2500或更高,最强版本的Stockfish引擎估计的人类Elo评分高达3644。

除了Elo分数,排行榜还增加了“平均每回合Token数”和“平均每回合成本”等指标,以反映模型在性能和效率之间的权衡。排行榜存在一些限制,如仅限于国际象棋、严格的超时限制和抽样随机性。

Kaggle还发布了一个包含可移植棋谱(PGN)和模型公开推理过程的数据集,旨在评估和比较通用语言模型的战略推理能力。Kaggle计划定期将新模型加入国际象棋文本排行榜及其他Game Arena排行榜,以跟踪AI模型在战略规划、推理和其他认知能力方面的进步。

(以上内容均由Ai生成)

你可能还想读

Meta签约多家媒体,为AI提供实时新闻

Meta签约多家媒体,为AI提供实时新闻

快速阅读: 据媒体报道,Meta与CNN、福克斯新闻等多家国际媒体签署AI数据合作协议,重启付费合作以提升Meta AI在新闻时效性与准确性方面的表现,并引导用户访问合作方网站。 日前,美国科技企业Meta宣布与多家国际新闻机构签署商业人工 […]

发布时间:2025年12月8日
Semaverse推AI平台赋能并购决策

Semaverse推AI平台赋能并购决策

快速阅读: 据最新消息,人工智能初创企业Semaverse近日推出“并购智能基础设施”平台,依托多智能体架构与智能记忆系统,为私募股权基金等提供覆盖交易全周期的五大智能化功能,助力数据驱动决策。 近日,人工智能初创企业Semaverse正式 […]

发布时间:2025年12月8日
Gartner建议全面禁用AI浏览器

Gartner建议全面禁用AI浏览器

快速阅读: 据Gartner发布消息称,AI浏览器存在严重数据安全与隐私风险,其侧边栏功能可能自动上传敏感信息至云端,企业部署前须严格评估后端安全机制并限制高危操作场景。 日前,国际知名研究机构Gartner发布风险警示,指出当前流行的AI […]

发布时间:2025年12月8日
利雅得航空携手IBM打造全球首家AI原生航司

利雅得航空携手IBM打造全球首家AI原生航司

快速阅读: 据最新消息,IBM依托混合云与红帽OpenShift技术,为175国客户提供AI及量子计算等创新方案,加速金融、医疗等关键领域数字化转型,深化本地化服务以提升全球产业链智能化水平。 国际商业机器公司(IBM)日前宣布,其作为全球 […]

发布时间:2025年12月8日
英语国家民众对AI更悲观

英语国家民众对AI更悲观

快速阅读: 据YouGov发布消息称,其2025年8月对九国调查显示,西欧民众对AI态度较积极,英语国家更悲观,就业影响最受担忧,而医疗、办公等领域获普遍认可。 日前,国际民调机构YouGov发布一项涵盖九国的调查报告显示,公众对人工智能( […]

发布时间:2025年12月8日
AI无法替代税务专家的判断与质疑

AI无法替代税务专家的判断与质疑

快速阅读: 12月8日消息,专家警示AI在税务申报中存在合规与伦理风险,强调其无法替代专业判断,呼吁合理界定应用边界,防范不法机构借智能算法诱导激进申报,确保人机协同、合法合规。 近日,有关人工智能在税务申报领域应用的讨论引发关注。专家指出 […]

发布时间:2025年12月8日
德州法学院以伦理先行培养AI时代律师

德州法学院以伦理先行培养AI时代律师

快速阅读: 据彭博法律报道,美国得州多所法学院以伦理为先推动AI审慎融入法律教育,要求明确使用规范并强调人类判断不可替代,呼应州律师协会第705号伦理准则。 近日,美国得克萨斯州在人工智能时代积极探索法律教育的务实路径,强调以伦理为先、审慎 […]

发布时间:2025年12月8日
法律团队如何审慎应用自主AI获最大效益

法律团队如何审慎应用自主AI获最大效益

快速阅读: 据最新消息,智能体AI在法律领域引发关注,其高自主性可执行多步骤任务提升效率,但带来责任认定、合同效力等新型风险,专家建议依“自主性光谱”精准配置风控资源。 近日,人工智能技术在法律领域的应用迈入新阶段。继生成式AI之后,具备更 […]

发布时间:2025年12月8日