阿里通义千问开源新一代音频语言模型 支持语音聊天且内容精准度更高
创始人
2024-08-13 22:15:18
0次

【太平洋科技快讯】近日,阿里巴巴旗下通义千问团队宣布正式开源Qwen2-Audio系列的两个模型——Qwen2-Audio-7B和Qwen2-Audio-7B-Instruct。Qwen2-Audio系列模型作为大规模音频语言模型,具备接受多种音频信号输入的能力,并能根据语音指令进行音频分析或直接生成文本响应。

Qwen2-Audio提供两种交互模式。一是语音聊天模式,用户可无需文本输入,直接通过语音与模型进行互动;二是音频分析模式,用户可结合音频和文本指令对音频内容进行分析,并且该模型支持超过8种语言和方言,包括中文、英语、法语、意大利语、西班牙语、德语、日语和粤语,满足不同用户的需求。

Qwen2-Audio与上一代模型Qwen-Audio相比,Qwen2-Audio在声音理解能力和指令跟随能力上均实现了显著提升,通义团队还发布了一套全新的音频理解模型测评基准,相关论文已被国际顶级会议ACL 2024收录。

该模型具有高性能、易于集成和可微调的特点,代码已集成到Hugging Face的transformers库,方便开发者快速上手和使用。

在一系列基准数据集的测试中,Qwen2-Audio系列模型的表现超越了之前的最佳模型,展现了其在音频处理领域的领先地位。

相关内容

热门资讯

国产大模型下调推理服务价格,南... 近日,国内某大模型企业宣布下调其flash系列模型服务价格,输入缓存命中、输入缓存未命中及输出价格最...
解码青年人AI生活《2026有... 中新网深圳9月5日电(记者索有为)《2026有意思生活方式报告》(下称《报告》)4日在全国首个有意思...
OpenAI 最强 AI 生图... 9月9日消息,OpenAI 9 月 9 日官宣发布 ChatGPT Images 2.5,图像生成延...
探索AI供应链产业化路径京东推... 2026年以来,人工智能应用范围加速拓展,持续从数字空间走向现实生活,广泛融入生产线、仓储厂房、配送...
教育部发文!AI生成内容,教师... 一篇论文,因为AI使用不当,相关高校师生被通报处理。 9月2日,安徽财经大学公布“教师与学生涉嫌学术...
AI识别出近800种可充当乳化... 英国利兹大学食品科学与营养学院和爱丁堡大学科学家携手,开发出一款 人工智能(AI)工具,能从数千万种...
搭上低空经济、AI文旅?两连板... 桂林旅游(000978)回应市场热点。 9月8日,桂林旅游再度涨停,斩获2连板。当天晚间,该公司披露...
硅谷:我们不能被硅谷“AI刹车... 【文/底线思维】 OpenAI首席科学家Jakub Pachocki最近写了一篇文章,题目叫《An ...