AI

Meta 推出 ARE 和 Gaia2,提升智能体真实场景适应力

发布时间:2025年9月25日    来源:szf
Meta 推出 ARE 和 Gaia2,提升智能体真实场景适应力

快速阅读: Meta推出新评估平台ARE及基准模型Gaia2,模拟现实世界环境,评估智能体在动态条件下的适应能力。Gaia2支持多协议,测试智能体应对变化条件、故障及模糊指令的表现,OpenAI的GPT-5在测试中领先。

在智能体性能评估领域,如何有效测试其在真实场景中的表现一直是个亟待解决的问题。尽管市场上已有多个评估基准尝试解决此问题,但 Meta 的研究人员认为,现有方法仍不足以真实反映智能体的适应能力。为此,Meta 推出了新的评估平台——Agents Research Environment (ARE) 和全新的基准模型 Gaia2,旨在帮助评估智能体在实际应用中的表现。

ARE 的设计目标是创建一个类似现实世界的环境,让智能体在其中进行交互。该环境中的任务异步进行,时间持续流动,智能体需在动态条件下调整和执行任务。ARE 的关键元素包括状态保持的 API 接口、环境集合、事件、通知和场景等,用户可根据自身需求自定义测试场景。

作为 ARE 的核心部分,Gaia2 专注于评估智能体在复杂环境中的能力。与早期的 Gaia1 基准不同,Gaia2 不仅考察智能体寻找答案的能力,还评估它们应对不断变化的条件、截止日期、API 故障及模糊指令的表现。此外,Gaia2 支持多种协议,如 Agent2Agent,用于评估智能体间的协作能力。

Gaia2 的评估过程异步进行,即便智能体处于空闲状态,时间依旧流逝,这有助于衡量智能体在接收到新事件时的响应能力。通过在动态环境中进行的1120项任务测试,结果显示 OpenAI 的 GPT-5 在 Gaia2 基准上表现突出,居于领先地位。

除 Meta 的 Gaia2 外,市场上还有其他提供真实环境测试的评估平台,例如 Hugging Face 的 Yourbench、Salesforce 的 MCPEval 和 Inclusion AI 的 Inclusion Arena。这些平台各有侧重点,而 Gaia2 特别强调智能体的适应能力和处理突发事件的能力,为企业提供了一种有效的智能体性能评估方式。

(以上内容均由Ai生成)

关键词: AREGaia2Meta

你可能还想读

印尼副部长呼吁谨慎使用AI进行公共沟通

印尼副部长呼吁谨慎使用AI进行公共沟通

快速阅读: 印度尼西亚通信和数字事务部副部长Nezar Patria呼吁公共关系专业人员谨慎、道德地使用AI,强调AI虽具潜力,但需人类监督与伦理责任,确保沟通质量与真实性。 雅加达(ANTARA)- 印度尼西亚通信和数字事务部副部长Nez […]

发布时间:2025年10月23日
名人及AI巨头呼吁停止追求超智能

名人及AI巨头呼吁停止追求超智能

快速阅读: 超过700名科学家、政治人物和名人呼吁暂停开发超人工智能,直至技术安全可控且获公众支持。未来生命研究所发布公开信,强调当前AI发展路径与公众期望、安全性及伦理标准脱节。 超过700名科学家、政治人物和名人,包括哈里王子、理查德· […]

发布时间:2025年10月23日
保守活动人士因谷歌AI生成虚假信息起诉谷歌

保守活动人士因谷歌AI生成虚假信息起诉谷歌

快速阅读: 保守活动人士罗比·斯塔巴克因谷歌AI系统生成关于他的虚假信息,将其诉至特拉华州法院,要求至少1500万美元赔偿。谷歌称此为Bard误判所致,已尽力处理。 保守活动人士罗比·斯塔巴克周三对谷歌提起诉讼,指控这家科技巨头的人工智能系 […]

发布时间:2025年10月23日
拉夫劳伦推出AI购物体验,个性化服务引领未来时尚

拉夫劳伦推出AI购物体验,个性化服务引领未来时尚

快速阅读: 拉尔夫劳伦与微软合作推出AI对话购物工具“Ask Ralph”,提供个性化风格灵感,强调技术应提升品牌体验而非目的本身,展现AI个性化体验趋势。 9月,拉尔夫劳伦(与微软合作)发布了“Ask Ralph”,这是一款被描述为“由人 […]

发布时间:2025年10月23日
荣耀转型AI终端生态公司,方飞详解1 x 3 x N战略

荣耀转型AI终端生态公司,方飞详解1 x 3 x N战略

快速阅读: 荣耀董事长吴晖宣布转型为AI终端生态公司,提出1 x 3 x N战略,涵盖HONOR AI Connect平台及多项赋能措施,推动AI场景化落地,涉及教育、家居、健康等多领域。 感谢IT之家网友 風見暉一 的线索投递! IT之家 […]

发布时间:2025年10月23日
微软Photos推AI绘图与智能重塑新功能

微软Photos推AI绘图与智能重塑新功能

快速阅读: 微软在其Photos应用中推出AI驱动的Restyle Image和Image Creator功能,前者可智能重塑照片风格,后者能根据描述生成高质量图像,均支持隐私保护,旨在提升图像创作体验。 微软近日在其 Photos(照片) […]

发布时间:2025年10月23日
2025新一代人工智能创业大赛启动 全球招募火热进行中

2025新一代人工智能创业大赛启动 全球招募火热进行中

快速阅读: 网易传媒启动2025新一代人工智能创业大赛,聚焦AI新技术与应用,设三大赛道,面向A轮前团队,奖金总额100万元,提供多维指导与资源支持。 2025年10月22日,网易传媒正式启动 “2025新一代人工智能创业大赛”,面向全球创 […]

发布时间:2025年10月23日
谷歌量子芯片Willow实现可验证量子优势,性能超13000倍

谷歌量子芯片Willow实现可验证量子优势,性能超13000倍

快速阅读: 谷歌发布量子芯片Willow,成功运行“量子回声”算法,实现首个可验证的量子优势,比超级计算机快13,000倍,为新药研发和材料科学开辟新途径。 继量子计算研究团队荣获诺贝尔物理学奖之后,谷歌再次取得突破性进展。当地时间10月2 […]

发布时间:2025年10月23日