阿里云正式推出 qwen3-omni,宣告全球首个原生端到端全模态 ai 模型诞生,该模型现已全面开源。qwen3-omni 能够处理文本、图像、音频和视频等多样化输入形式,并支持实时流式输出,无论是通过文字还是自然语音交互,均可实现快速响应。

在多个应用场景中,Qwen3-Omni 展现出卓越的跨模态能力。其核心技术依托于早期以文本为中心的预训练策略与混合多模态训练方法,从而构建出强大的多模态理解力。尤其在音频与视频任务中表现突出,同时在文本和图像处理方面也维持了高水准。根据涵盖36项音频与视频基准测试的结果显示,Qwen3-Omni 在其中22项中达到了当前最优水平,其在自动语音识别与音频理解方面的性能已可媲美行业领先的 Gemini2.5Pro。
该模型支持多达119种文本语言,兼容19种语音输入语言以及10种语音输出语言,涵盖英语、中文、法语、德语等主流语种,具备广泛的国际化服务能力。其架构创新性地采用 MoE(专家混合)系统,并融合 AuT 预训练机制,赋予模型强大的通用表征能力。此外,多码本设计保障了音频与视频交互的低延迟特性,确保自然对话过程流畅无卡顿。
除 Qwen3-Omni 外,阿里云还发布了 Qwen3-TTS,一款支持17种音色选择的文本转语音模型。该模型在多项权威评测中超越同类产品,尤其在语音稳定性与音色还原度方面表现亮眼。
同期推出的还有 Qwen-Image-Edit-2509,专注于提升图像编辑能力,支持多图协同编辑,显著增强编辑结果的一致性与视觉效果。它不仅适用于单张图像修改,还能实现多图拼接与联动调整,满足复杂图像处理需求。
源码地址:点击下载
以上就是阿里云推出全球首个全模态 AI 模型 Qwen3-Omni的详细内容,更多请关注php中文网其它相关文章!
 
                        
                        每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。
 
                 
                                
                                 收藏
收藏
                                                                             
                                
                                 收藏
收藏
                                                                             
                                
                                 收藏
收藏
                                                                            Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号