英伟达发布全新AI音频模型Fugatto
编译/前方智能
英伟达近日推出了一款名为 Fugatto(全称为 Foundational Generative Audio Transformer Opus 1)的 AI 音频模型。这款模型不仅能通过文字提示生成音乐和音效,还能对现有音频进行修改和转换,创造出前所未有的声音组合。
图源:英伟达
据英伟达介绍,Fugatto 具备多项独特功能,比如可以将钢琴演奏的音乐转换为人声演唱,能够调整语音的口音和情绪,甚至可以创造出"尖叫的萨克斯"或"犬吠般的小号声"等超现实音效。该模型采用了创新的 ComposableART 技术,能够将训练过程中分别出现的音频特征进行组合,从而产生全新的声音效果。
在技术层面,研究团队使用了来自全球多个开源数据集的约 2000 万个音频样本进行训练,形成了一个拥有 25 亿参数的大规模模型。该项目由来自印度、巴西、中国、约旦和韩国等多个国家的研究人员共同开发,这种多元化的团队构成也使得模型在处理多语言和多重口音方面表现出色。
英伟达应用深度学习研究副总裁 Bryan Catanzaro 表示,生成式 AI 技术将为音乐、游戏和普通创作者带来全新的创作可能性。不过,考虑到生成式技术可能带来的潜在风险,英伟达目前尚未计划对外发布这项技术。
原文标题:英伟达发布全新 AI 音频模型 Fugatto
相关推荐
- 免责声明
- 本文所包含的观点仅代表作者个人看法,不代表新火种的观点。在新火种上获取的所有信息均不应被视为投资建议。新火种对本文可能提及或链接的任何项目不表示认可。 交易和投资涉及高风险,读者在采取与本文内容相关的任何行动之前,请务必进行充分的尽职调查。最终的决策应该基于您自己的独立判断。新火种不对因依赖本文观点而产生的任何金钱损失负任何责任。