报告:AI编程工具效果夸大,开发者效率反而下降
快速阅读: 贝恩公司报告指出,尽管AI编程工具被寄予厚望,但实际上并未显著提升生产率,甚至可能减缓开发者速度,安全问题亦随之增加。
人工智能行业曾对其技术能大幅提升开发者的生产力做出重大承诺,声称开发者只需简单的文本提示就能生成大量代码。然而,《注册报》报道,这些说法似乎被大大夸大了。研究发现,生产率的提高最多也只能说是微乎其微——最糟糕的是,人工智能实际上可能减缓人类开发者的速度。
在一份新报告中,管理咨询公司贝恩公司发现,尽管编程是“最早部署生成式人工智能的领域之一”,但“节省的成本并不显著”。报告称:“生成式人工智能以极高的期望进入市场,许多公司迅速启动了试点项目。然而,结果并未达到炒作的效果。”
首先,即使是在推出了AI工具的公司中,“开发者采用率也较低”。更糟糕的是,虽然一些助手实现了“10%到15%的生产率提升”,但大多数情况下,“这些节省并没有转化为积极回报”。这是又一个警告信号,表明即使在最有前景的领域,人工智能行业也在努力实现其巨大的宣传效果。尽管公司投入了数十亿美元进行开发,分析师们公开担心一个巨大的人工智能泡沫正在逼近破裂。
7月,非营利组织模型评估与威胁研究的一项严厉研究表明,人工智能编码工具不仅未能实现预期的生产率提升,反而可能减缓软件开发者的速度。“令人惊讶的是,我们发现当开发者使用AI工具时,他们比不使用时多花费19%的时间——AI让他们变得更慢。”研究人员写道。这是因为“幻觉”迫使开发者花更多时间清理和审查代码。此外,这些工具在处理大型和复杂的代码库时表现更差,经常误解上下文。
编程网站Stack Overflow在今年早些时候的一项调查中也发现,开发者对AI工具的信任度大幅下降——尽管使用这些工具的开发者比例有所上升。许多人指出,这些解决方案“几乎正确,但不够完美”。“最令人惊讶的发现之一是,与前几年相比,开发者对AI的偏好发生了显著变化,尽管大多数开发者使用AI,但他们今年对AI的喜爱和信任程度都降低了。”Stack Overflow市场研究和洞察高级分析师Erin Yepis在7月份告诉《VentureBeat》说。“鉴于科技新闻中对AI的投资和关注如此之高,我本以为随着技术的进步,信任度会增长。”她补充道。
目前尚不清楚“代理型AI”是否会改变这一状况,这种设计用于自主执行一系列任务的人工智能正在重塑企业格局。“只有那些果断行动——重新设计架构、团队和工作方式的企业才能释放代理型AI的全部价值。”报告称。
除了减缓编码者的速度外,专家还警告,AI编码助手可能会引入重大的安全问题。最近的一份报告显示,使用AI的开发者产生的安全问题比不使用该技术的同行多出十倍。
还有一个问题是找到一种公认的衡量生产率提升的方法,这是一个明显的遗漏,考虑到已经投入的数十亿美元。贝恩公司认为,公司需要全力以赴才能实现他们所承诺的价值。“真正的价值来自于在整个软件开发生命周期中应用生成式AI,而不仅仅是编码。”报告称。“几乎每个阶段都可以受益,从早期的需求发现和规划阶段,到测试、部署和维护。”“然而,广泛采用需要流程变革。”咨询公司补充道,“如果AI加速了编码,那么代码审查、集成和发布也必须加快,以避免瓶颈。”更多关于AI编码的信息:数据显示,使用AI的程序员会产生更多的明显安全问题。
(以上内容均由Ai生成)