OpenAI警告武器化AI风险高并推防护计划

发布时间:2025年12月15日    来源:szf
OpenAI警告武器化AI风险高并推防护计划

快速阅读: 据OpenAI消息,该公司正强化AI模型安全防护以应对网络攻击风险,已更新《准备度框架》并将网络安全列为重点,推出Aardvark漏洞扫描工具并计划成立前沿风险理事会,旨在提升防御能力、阻断恶意请求并限制高危功能开放。

近日,人工智能企业OpenAI发布多项举措,旨在防范其AI模型被滥用于网络攻击。该公司指出,随着AI技术快速发展,其在网络安全领域的潜在风险已达到“高”级别,亟需采取行动协助防御方应对挑战。

当前,AI模型如ChatGPT在提升效率的同时,也可能被恶意利用,例如用于自动化暴力破解、生成恶意软件或高仿真钓鱼内容,并优化攻击链路。近期已有不法分子通过间接提示注入等方式,利用AI聊天机器人和浏览器摘要功能传播诈骗信息。研究人员发现,部分AI功能甚至会引导用户访问恶意网站,个别AI助手还可能无意中创建后门,简化网络犯罪流程。

与此同时,AI亦可赋能防御体系。安全人员可借助其识别威胁、辅助训练专业人才,并承担告警分类等重复性任务,从而释放人力资源用于更高价值工作。

OpenAI表示,AI系统的网络攻防能力正快速演进。以“夺旗赛”(CTF)为测试基准,其GPT-5模型在2025年8月的成功率为27%,至同年11月的GPT-5.1-Codex-Max版本已升至76%。该公司预计,若此趋势持续,未来模型将具备开发针对高防护系统零日远程漏洞利用的能力,或显著协助复杂、隐蔽的企业级入侵行动。

为系统评估与管控风险,OpenAI于2025年4月更新《准备度框架》,聚焦三大高危领域:生化能力、网络安全能力及AI自我改进能力,其中网络安全被列为重点方向。该框架设定了可量化的风险阈值,并明确在部署高能力模型前,须建立充分的安全保障措施,以最大限度降低造成严重危害的可能性。

OpenAI近日表示,正加大对模型安全防护的投入,旨在提升其在网络安全防御中的实用性。该公司已启动专项威胁情报与内部风险防控计划,并对模型进行强化训练,以识别并拒绝恶意请求。尽管攻击者可能伪装成防御人员诱导模型生成有害内容,OpenAI仍致力于确保其技术为资源有限的防御方提供显著优势。当系统检测到潜在风险行为时,将采取阻断输出、转至安全性更高或能力受限的模型,或启动人工审核等措施。

此外,OpenAI正与红队(Red Team)服务商合作,通过模拟攻击测试现有安全机制,以期在网络犯罪分子发现漏洞前先行修复。公司还计划推出“可信访问计划”,向部分用户或合作伙伴开放具备增强能力的测试模型,用于网络安全防御用途,但该计划将实施严格管控。OpenAI表示,仍在探索哪些功能可广泛开放,哪些需分级限制,相关决策将影响该计划的未来设计,并希望其成为构建韧性生态体系的基础。

目前,OpenAI已将其安全研究代理工具Aardvark转入私有测试阶段。该工具可扫描代码库中的漏洞并提供修复建议,据称已在开源软件中发现多个新型CVE漏洞。同时,公司将在近期成立“前沿风险理事会”(Frontier Risk Council),初期聚焦人工智能在网络安全领域的风险与应对建议,后续将逐步扩展至其《准备度框架》所涵盖的其他风险类别。

业内提醒,人工智能作为新兴工具,需审慎部署。研究机构Gartner近期建议企业避免或禁用AI浏览器,以防提示注入攻击和数据泄露。各方应以评估传统新技术的方式,全面权衡AI应用的潜在收益与安全风险。

(以上内容均由Ai生成)

你可能还想读

HackerOne双高管加盟加速企业市场拓展

HackerOne双高管加盟加速企业市场拓展

快速阅读: 据HackerOne消息,该公司近日任命Stephanie Furfaro为首席营收官、Stacy Leidwinger为首席营销官,旨在强化全球市场拓展与AI驱动的威胁暴露管理能力,推动CTEM解决方案落地。 网络安全企业Ha […]

发布时间:2025年12月16日
习惯决定AI落地成败

习惯决定AI落地成败

快速阅读: 据国际法律技术协会消息,2025年技术调查显示80%法律团队已采用生成式AI,当前重点在于平衡技术工具与以人为本的实施策略,以应对智能体AI时代的工作转型挑战。 据国际法律技术协会(ILTA)2025年技术调查报告显示,80%的 […]

发布时间:2025年12月16日
旧AI芯片将何去何从?

旧AI芯片将何去何从?

快速阅读: 截至发稿时,2026年5月19日至20日,财富职场创新峰会将在亚特兰大举行,聚焦人工智能与人文战略融合重塑未来工作模式,全球创新领袖将共议技术赋能、人才发展及组织变革新趋势。 2026年5月19日至20日,财富职场创新峰会将在亚 […]

发布时间:2025年12月16日
新闻机构面临AI转型关键抉择

新闻机构面临AI转型关键抉择

快速阅读: 据行业人士表示,新闻机构面临AI时代关键抉择:若继续屏蔽爬虫将丧失信息分发主导权,专家建议中小媒体联合开发标准化API,主动开放内容并嵌入AI服务,以在智能化转型中争取品牌曝光与合作机会。 2026年,新闻机构将面临人工智能(A […]

发布时间:2025年12月16日
AI智能眼镜爆发式增长引发合规担忧

AI智能眼镜爆发式增长引发合规担忧

快速阅读: 据权威渠道透露,AI眼镜加速企业落地,2024年全球出货量激增210%,但其生物识别数据收集功能引发BIPA、GDPR等合规风险,企业需加强隐私评估、员工培训及法律协议以规避高额赔偿与声誉损失。 人工智能眼镜已从未来概念逐步走入 […]

发布时间:2025年12月16日
St. Jude推出AI平台加速药物组合发现

St. Jude推出AI平台加速药物组合发现

快速阅读: 据圣裘德儿童研究医院消息,其科学家近日开发出名为Combocat的药物组合筛选平台,融合机器学习与声波液体处理技术,显著提升新药组合发现效率并降低试剂消耗,已成功在神经母细胞瘤研究中验证效果,平台现已开源免费供全球科研使用。 美 […]

发布时间:2025年12月16日
企业AI落地依赖合作伙伴生态

企业AI落地依赖合作伙伴生态

快速阅读: 据SiliconANGLE Media报道,Cloudera联合英伟达推出企业级AI生态系统,集成NIM微服务与高可用架构,将部署周期从六个月缩短至数周,并指出2025年“智能体工作流”将迈入生产应用关键阶段。 随着人工智能从实 […]

发布时间:2025年12月16日
千美元内可投的AI指数基金首选

千美元内可投的AI指数基金首选

快速阅读: 据权威消息,景顺QQQ信托作为跟踪纳斯达克100指数的代表性AI主题基金,汇聚多家领先科技企业,为投资者提供分散风险、便捷参与人工智能产业发展的高流动性配置工具。 投资者无需自行挑选人工智能领域的个股,大型投资机构已推出相关产品 […]

发布时间:2025年12月16日