AI

阿里云发布全球首个全模态AI模型Qwen3-Omni,支持多语言处理

发布时间:2025年9月23日    来源:szf
阿里云发布全球首个全模态AI模型Qwen3-Omni,支持多语言处理

快速阅读: 阿里云发布Qwen3-Omni,全球首个原生端到端全模态AI模型,支持119种文本语言和19种语音输入,处理文本、图像、音频和视频,性能领先。

阿里云发布了Qwen3-Omni,标志着全球首个原生端到端全模态AI模型的诞生,该模型现已开源。Qwen3-Omni能够处理文本、图像、音频和视频等多种输入类型,实现快速响应,无论是通过文本还是自然语音,均能实现实时流式输出。

Qwen3-Omni在多个领域展现了跨模态的卓越表现。经过早期以文本为中心的预训练和混合多模态训练,该模型具备强大的多模态处理能力,在音频和视频性能上尤为突出,同时在文本和图像处理上也达到高标准。根据36项音频和视频基准测试,Qwen3-Omni在22项测试中达到最新领先水平,特别是在自动语音识别和音频理解等领域,其表现与行业内的Gemini2.5Pro相当。

Qwen3-Omni支持119种文本语言和19种语音输入语言,以及10种语音输出语言,包括英语、中文、法语和德语等,使其能够更好地服务于全球用户。该模型采用MoE(专家混合)系统和AuT预训练技术,确保了强大的通用表征能力。多码本设计保证了低延迟的实时音频和视频交互,支持自然对话的流畅进行。

除了Qwen3-Omni,阿里云还推出了Qwen3-TTS,这是一款支持17种音色选择的文本转语音模型。该模型在多项评估基准中表现出色,尤其是在语音稳定性和音色相似度方面超越了多款竞品。

Qwen-Image-Edit-2509是另一款新推出的工具,专注于多图像支持的图像编辑,显著提高了编辑的一致性和效果。它不仅能处理单张图像,还支持多图像的拼接编辑,满足更复杂的编辑需求。

GitHub: https://github.com/QwenLM/Qwen3-Omni

huggingface: https://huggingface.co/collections/Qwen/qwen3-omni-68d100a86cd0906843ceccbe

重点:

🌟 Qwen3-Omni是全球首个原生端到端全模态AI模型,支持文本、图像、音频和视频的统一处理。

🌐 模型支持119种文本语言和19种语音输入,能够满足全球用户的多语言需求。

🖼️ 新发布的Qwen-Image-Edit-2509支持多图像编辑,显著提升编辑的一致性和效果。

(以上内容均由Ai生成)

你可能还想读

纽约市消防局安装AI摄像头,快速检测公园野火

纽约市消防局安装AI摄像头,快速检测公园野火

快速阅读: 纽约市消防局为应对野火风险,在多个公园安装太阳能摄像头,实时监测烟雾和火焰,防止火灾蔓延。此举旨在保护社区安全,应对气候变化带来的挑战。 随着纽约市各地的野火风险上升,消防局(FDNY)正利用人工智能技术,在火灾蔓延前加以阻止。 […]

发布时间:2025年10月24日
拉合尔发展局启动AI系统优化地图审批流程

拉合尔发展局启动AI系统优化地图审批流程

快速阅读: 拉合尔发展局计划用AI系统替代现有地图提交和审批流程,以减少公众投诉和消除腐败,新系统将自动审批地图,提高透明度。 拉合尔:据《黎明报》报道,拉合尔发展局(LDA)已开始着手制定一项计划,以人工智能系统取代现有的在线和手动地图提 […]

发布时间:2025年10月24日
印度政府发布新规,打击Deepfake和合成信息

印度政府发布新规,打击Deepfake和合成信息

快速阅读: 印度政府发布《信息技术规则》2021年修正案草案,首次定义“合成信息”,要求所有合成内容强制标记并嵌入元数据,以增强透明度和责任,公众可于11月6日前提交意见。 印度政府在规范人工智能(AI)使用方面迈出了正式的第一步,发布了《 […]

发布时间:2025年10月24日
谷歌提供TPU助力Anthropic训练Claude模型

谷歌提供TPU助力Anthropic训练Claude模型

快速阅读: Anthropic与谷歌扩大合作,将使用百万颗AI芯片,价值数百亿美元,以加速AI系统发展。Anthropic将获超一吉瓦算力,2026年上线,用于训练Claude模型。此举反映AI行业对芯片需求高涨。 Anthropic正在扩 […]

发布时间:2025年10月24日
苹果开始从休斯顿工厂发货AI服务器

苹果开始从休斯顿工厂发货AI服务器

快速阅读: 苹果开始从休斯顿工厂发货配备特殊芯片的人工智能服务器,支持iPhone和Mac的隐私保护功能,作为6000亿美元美国投资计划的一部分,服务器将安装在美国各地的数据中心。 苹果公司周四宣布,已经开始从位于休斯顿的工厂发货人工智能服 […]

发布时间:2025年10月24日
微软Edge新增Copilot模式,挑战ChatGPT Atlas

微软Edge新增Copilot模式,挑战ChatGPT Atlas

快速阅读: 微软宣布在Edge浏览器中推出AI驱动的Copilot模式,旨在简化任务管理、整理标签页及恢复会话。新功能包括Copilot Actions和Journeys,支持语音命令执行操作及主题归类浏览会话,强调用户隐私保护。 微软宣布 […]

发布时间:2025年10月24日
谷歌向Anthropic提供百万AI芯片,深化数十亿美元合作

谷歌向Anthropic提供百万AI芯片,深化数十亿美元合作

快速阅读: 谷歌母公司Alphabet将向AI公司Anthropic提供100万片TPU芯片,增强其计算能力,巩固双方合作关系,彰显AI竞赛中的巨额投资需求。 谷歌母公司Alphabet将向Anthropic提供多达100万片专门的人工智能 […]

发布时间:2025年10月24日
微软推出新AI角色Mico,赋予Copilot虚拟助手人格化面貌

微软推出新AI角色Mico,赋予Copilot虚拟助手人格化面貌

快速阅读: 微软推出新AI角色Mico,作为Copilot虚拟助手的化身,旨在为AI聊天机器人增添个性。Mico能根据对话内容变化表情和动作,提供更友好的交互体验。 近三十年前让微软办公软件用户感到厌烦的动画纸夹Clippy,或许只是超前于 […]

发布时间:2025年10月24日