大模型伦理安全综述发布,揭示新挑战与对策

发布时间:2025年9月25日    来源:szf
大模型伦理安全综述发布,揭示新挑战与对策

快速阅读: 刘峰等开展《大规模语言模型的伦理安全:系统综述》研究,探讨LLMs信息安全威胁及防御策略,关注社会伦理影响,提出加强伦理治理方向。

随着自然语言处理技术的快速进步,以GPT、BERT和T5为代表的大规模语言模型(LLMs)已在教育、医疗、政治等领域广泛应用,显著提升了工作效率,降低了成本,并促进了数字化和智能化的发展。然而,LLMs的广泛使用也带来了新的安全挑战和伦理问题,引起了学术界和社会的广泛关注。

为此,刘峰、姜佳琪、陆雅婷、黄湛一和姜九铭共同开展了题为《大规模语言模型的伦理安全:系统综述》的研究。该研究从2020年到2024年1月,系统地回顾了LLMs在信息安全和社会伦理领域的学术进展。通过在Web of Science、Scopus、Ei Village和中国知网等数据库中使用特定关键词进行文献检索,并基于标题、摘要和全文质量筛选,最终选定了74篇相关研究文章进行深入分析。

研究深入探讨了LLMs面临的信息安全威胁,包括利用LLMs实施的不当行为(如网络钓鱼攻击、社会工程攻击、恶意软件威胁、黑客攻击和虚假信息生成)以及针对LLMs的恶意攻击(如数据和模型层面的攻击、使用和交互层面的攻击)。研究还总结评估了当前基于LLMs的防御策略,这些策略分为模型部署前的防御措施(包括参数处理、输入预处理和对抗训练)和部署后的应急措施,并讨论了LLMs生成内容的检测方法。此外,研究还考察了LLMs的社会伦理影响,重点关注输出幻觉、偏见、数据隐私泄露和对人类自主性的影响,并比较了中外学者在这一领域的研究差异。

最后,论文提出了未来加强LLMs安全应用和伦理治理的方向,包括开发智能自动化对抗训练方法、探索多模态和跨语言防御机制、建立伦理和法律框架,以及实现LLMs与人类价值观的对齐,旨在为LLMs技术的未来安全应用和发展提供理论基础和全面视角。

该论文《大规模语言模型的伦理安全:系统综述》发表于《前沿工程管理》2025年第12卷第1期,页码128-140,DOI: https://doi.org/10.1007/s42524-025-4082-6。本研究得到了北京大学北京行为与心理健康重点实验室的支持。

(以上内容均由Ai生成)

你可能还想读

美国科技未来需投资人才与科研

美国科技未来需投资人才与科研

快速阅读: 据最新消息,美国政府拟持股英特尔10%,以强化半导体战略,但专家强调需同步加大基础科研投入并解决STEM人才短缺,方能维系科技领先地位。 近日,美国政府宣布将持有英特尔公司10%的股权,引发广泛关注。此举被视为对本国半导体制造业 […]

发布时间:2025年12月8日
康宁押注AI数据中心光纤需求激增

康宁押注AI数据中心光纤需求激增

快速阅读: 据康宁公司介绍,AI数据中心加速转向光纤互联,单节点集成72颗GPU,布线长达两英里;因算力激增与带宽需求,光通信将推动AI硬件生态结构性变革,市场或扩至三倍。 近日,人工智能硬件基础设施加速升级,数据中心内部连接技术正经历重要 […]

发布时间:2025年12月8日
智能体AI重塑政府与民众服务关系

智能体AI重塑政府与民众服务关系

快速阅读: 据最新消息,AI代理技术在能源、环保、医疗和教育等领域试点成效显著,提升地震解释准确率70%,优化垃圾清运与课程设置,推动公共服务向智能优化转型。 近日,人工智能代理技术在公共服务领域展现出显著应用潜力。今年1月,阿布扎比国家石 […]

发布时间:2025年12月8日
英警方呼吁中央统筹AI应用

英警方呼吁中央统筹AI应用

快速阅读: 据techUK发布消息称,英格兰和威尔士警方需建立中央统筹机制并加大投入,以释放AI在执法中的潜力,解决应用不均、数据质量及算法偏见等问题,推动全国协调与透明治理。 英国信息技术行业组织techUK近日发布报告指出,英格兰和威尔 […]

发布时间:2025年12月8日
Viam携手优傲机器人推AI自动化方案

Viam携手优傲机器人推AI自动化方案

快速阅读: 据最新消息,美国Viam公司与优傲机器人达成合作,基于UR系列协作机器人开发AI驱动的表面处理系统,已应用于船舶打磨,并拓展至家具、建筑等行业,推动制造智能化转型。 近日,美国纽约企业Viam宣布与泰瑞达集团旗下优傲机器人公司( […]

发布时间:2025年12月8日
AI智能体破解医疗沟通困局

AI智能体破解医疗沟通困局

快速阅读: 据最新消息,美国医疗系统因信息孤岛问题导致患者沟通受阻,AI智能体技术正通过代理式通信提升诊疗协同效率,企业Infinitus已推动该方案在随访与用药管理等场景落地。 近日,美国医疗系统在信息互通方面面临的严峻挑战引发广泛关注。 […]

发布时间:2025年12月8日
AI虚拟演员Tilly Norwood引行业争议

AI虚拟演员Tilly Norwood引行业争议

快速阅读: 据美联社报道,AI虚拟演员蒂莉·诺伍德由Particle6公司打造,旨在探索影视AI应用,团队正优化其自然表现并计划明年推出互动功能,但遭部分经纪公司抵制。 近日,人工智能虚拟演员“蒂莉·诺伍德”(Tilly Norwood)再 […]

发布时间:2025年12月8日
苹果硬件主管或离职,芯片业务面临巨变

苹果硬件主管或离职,芯片业务面临巨变

快速阅读: 据彭博社报道,苹果硬件技术主管斯鲁吉考虑离职,其主导自研M系列与A19 Pro芯片,深度支撑全系产品,潜在出走或重创苹果芯片优势并撼动行业格局。 据彭博社日前报道,苹果公司高级副总裁、硬件技术主管约翰尼·斯鲁吉正考虑离职。斯鲁吉 […]

发布时间:2025年12月8日