部署 AI 代理的危险业务

发布时间:2025年3月10日    来源:szf
部署 AI 代理的危险业务

快速阅读: 据《电力走廊》最新报道,许多公司被人工智能代理的热潮所吸引,但忽视了潜在风险。SS&C蓝棱镜的副总裁夏提什·谢诺伊指出,缺乏人类监督的自主系统可能带来更大风险。企业应采取治理、技术和道德等多重防护措施来管理这些风险。谢诺伊建议从小规模部署开始,确保目标明确,以避免财务、声誉和监管损失。

许多公司被人工智能代理的热潮所迷惑,可能没有充分关注随之而来的潜在风险。SS&C蓝棱镜的全球技术联盟和人工智能战略区域副总裁夏提什·谢诺伊表示,人工智能代理不仅面临与普通语言模型相同的问题,其自主性质可能导致风险成倍增加。企业快速采用这项技术只会加剧这些危险。“当你创建这些自主系统时,缺乏人类监督,你只能祈祷代理的输出符合你的预期。”谢诺伊说。

人工智能代理旨在独立地与企业的多个不同部分互动。因此,数据安全失误、合规性和治理问题以及人工智能代理的质量问题可能会产生“连锁效应”,谢诺伊说,因为代理的访问增加了攻击面。但这并不意味着应完全避免使用人工智能代理,谢诺伊表示。企业需要了解他们将要面对的情况,并在深入前采取防护措施。

谢诺伊表示,有几种不同的预防措施可以帮助管理代理,所有这些都应由企业考虑:一种是治理和风险管理防护措施,在这种措施中,企业领导者评估在任何特定情况下实施代理的风险和回报。这包括考虑监管要求,谢诺伊补充道。

谢诺伊表示,有几种不同的预防措施可以帮助管理代理,所有这些都应由企业考虑:另一种是技术防护措施。尽管人工智能发展迅速,这些措施可能随时调整,但可观测性和监督可以帮助企业理解代理在不同条件下的表现。最后是道德防护措施,如透明度和关于如何以及为何使用人工智能代理的解释。他说:“你需要审计并应该审计人工智能代理所做的任何决定。”

尽管科技行业目前对代理型人工智能感到兴奋,但重要的是不要让炒作压倒常识:在一头扎进去之前,先思考一下你为什么需要这项技术。“首先要明确你的目标,”谢诺伊说,“不要用大锤打苍蝇。”谢诺伊表示,从小规模部署特定用例开始,并彻底分析结果,可以防止企业在财务、声誉和监管方面因代理失控而受损。他补充道:“采用速度实际上已超过治理框架部署速度。”

(以上内容均由Ai生成)

你可能还想读

美国能源部 17 个国家实验室全景及创世纪计划战略布局分析

美国能源部 17 个国家实验室全景及创世纪计划战略布局分析

快速阅读: 美国能源部17个国家实验室构成顶尖科研体系,在基础科学、能源安全、气候变化等领域发挥关键作用。拥有全球领先的超算资源及顶尖人才,年经费约220亿美元。随着“创世纪计划”启动,实验室将形成协同网络,推动美国在清洁能源、量子计算等前 […]

发布时间:2025年12月8日
谷歌Gemini 3 Pro发布

谷歌Gemini 3 Pro发布

快速阅读: 谷歌发布新一代推理模型Gemini 3 Pro,显著提升数学、编程和视觉理解能力。一经发布,Gemini 3 Pro几乎横扫各大评测榜单,在LMArena大模型竞技场中以1501的Elo得分高居榜首。在MathArena数学竞赛 […]

发布时间:2025年11月19日
独具创新,直击痛点:深度解析华为十大最新方案

独具创新,直击痛点:深度解析华为十大最新方案

快速阅读: 第三个方案,是华为的U6GHzAAU天线。综合来看,华为的U6GAAU,真正实现了容量覆盖双优,助力全球U6G商用。LampSiteX,是LampSite系列的最新型号。第五个方案,是华为有源天线产品——EasyAAU。Easy […]

发布时间:2025年11月13日
Palantir估值承压仍领跑AI赛道

Palantir估值承压仍领跑AI赛道

快速阅读: 近期,美国AI概念股整体承压,Palantir与英伟达遭遇做空传闻,引发市场短暂震荡。然而,在宏观调整与估值质疑中,Palantir仍凭借强劲业绩与差异化AI布局维持长期增长势头。分析人士认为,该公司正处于由“政府数据支撑”向“ […]

发布时间:2025年11月12日
Palantir与Snowflakes深化AI合作

Palantir与Snowflakes深化AI合作

快速阅读: Snowflake 与 Palantir 宣布建立战略合作,整合双方的数据与AI能力,使企业能够在统一的数据基础上直接调用 Palantir 的AI分析与智能应用工具,加速企业级AI落地。 2025年10月,Snowflake […]

发布时间:2025年11月10日
Palantir与迪拜控股共建AI公司

Palantir与迪拜控股共建AI公司

快速阅读: Dubai Holding 与 Palantir 宣布成立合资公司 Aither,致力于为中东地区政府与企业提供人工智能转型解决方案。该合作标志着 Palantir 在中东技术布局的进一步深化,也为当地公共服务与产业数字化提供新 […]

发布时间:2025年11月10日
Palantir携手Lumen共建企业AI平台

Palantir携手Lumen共建企业AI平台

快速阅读: 2025年10月,Palantir Technologies与Lumen Technologies宣布达成战略合作,联合打造面向企业级应用的人工智能服务平台。双方将以Palantir的Foundry与AIP平台为核心,推动通信与 […]

发布时间:2025年11月7日
Palantir携手Hadean拓展英国国防部AI战场模拟平台

Palantir携手Hadean拓展英国国防部AI战场模拟平台

快速阅读: 2025年10月,数据智能公司 Palantir Technologies 宣布与英国分布式计算企业 Hadean 达成战略合作,双方将共同为英国国防部(UK Ministry of Defence, UK MoD)扩展基于人工 […]

发布时间:2025年11月7日