新知榜官方账号
2023-12-08 22:38:12
据报道,Meta公司最近推出了一款名为Audiobox的AI声音生成模型。该模型能够同时接收语音及文字输入,用户可同时使用语音及文字描述,让这款模型生成所需的音频。据悉,这款模型基于Meta今年6月推出的VoiceboxAI模型,并具备生成各种环境音、自然对话语音的能力,还整合了音频生成和编辑能力,以便于用户自由生成自己所需的音频。
Meta公司表示,生成高品质音频需要有大量音频库及深厚的领域知识,但大众难以获得这些资源。因此,该公司推出这个模型旨在降低声音生成门槛,让任何人都更容易制作视频、游戏等应用场景的音效。
据测试,Audiobox模型基于Voicebox的“引导声音”机制,并配合“流量比对(flow-matching)”扩散模型生成方法,以实现“声音填充(audioinfilling)”功能,从而生成多层次的音频。此外,Meta还测试了如何使用Audiobox同时输入人声及文字提示,以生成带有情绪并拥有背景音的语音。
Meta公司声称,Audiobox在音质及“生成内容的准确度”方面表现优秀,已经顺利击败了AudioLDM2、VoiceLDM及TANGO等现有最佳的音频生成模型。最后,Audiobox已经开放向特定研究人员及学术界试用,以供测试模型品质及安全性。Meta公司计划在未来几周内向社会全面公开该模型。
相关工具
相关文章
相关快讯
推荐
中国首款3A游戏上线,《黑神话:悟空》出圈!
2024-08-21 13:46
盘点15款AI配音工具,短视频配音有救了!
2024-08-12 17:11
短视频文案没创意?10大AI写作工具来帮你!
2024-08-05 16:23
Midjourney发布V6.1版本,我已分不清AI和现实了!
2024-08-01 15:03
我发现了一款国产AI绘画神器,免费易上手!
2024-07-25 16:40
7位AI考生做今年高考题,能过一本线吗?
2024-07-19 17:17
世界上第一所AI学校来了,80亿人只需要1位老师?
2024-07-18 17:12
Sora首部AI广告片上线,广告从业者危险了!
2024-06-27 13:44
OpenAI与中国说拜拜,国产AI如何接棒?
2024-06-26 15:18
人与AI会产生爱情吗,专家发话了!
2024-06-17 17:28