深度学习技术应用:AI音频合成

新知榜官方账号

2023-11-26 02:05:18

深度学习技术应用:AI音频合成

AI音频合成在语音合成和歌曲生成领域都有广泛应用。本文介绍了AI音频合成的经典案例,包括喜马拉雅的单田芳声音重现版、QQ浏览器的免费小说AI语音包、短视频配音、虚拟歌声Xstudio等,同时详细介绍了AI歌曲生成的最新项目MuseNet和网易伏羲的人工智能创作平台。

语音合成的经典案例

在语音合成领域,喜马拉雅曾采集著名评书表演艺术大师单田芳生前的演出声音,运用文本转语音(TexttoSpeech,简称TTS)技术,推出单田芳声音重现版的《毛氏三兄弟》和历史类作品。在QQ浏览器首页的“免费小说”频道中的听书功能模块,用户也可以选择自己喜欢的AI语音包进行播放,语音包有六种AI音色可供选择:清朗男声、标准男声、软萌音、御姐音、东北女声、温柔淑女音,并且合成的语音节奏分明、情绪自然,能够很好地解放双眼。

短视频配音也是一个常见的音频生成应用领域。例如,“注意看,这个男人叫小帅。”短视频平台的很多电影解说都伴随这句话开始,随后很可能还会听到女主角“小美”的名字。抑扬顿挫的男声搭配一些电影的高潮情节画面,再加上相似的解说套路和背景音乐,这其实也是AI生成语音的典型应用,用户只需3-5分钟就可以看完一部“电影”。

AI歌曲生成

AI歌曲生成在OpenAI发布的最新项目MuseNet中,用户可以使用AI生成多达10种乐器演奏的歌曲,甚至还可以制作多达15种风格的音乐,模仿莫扎特和肖邦等古典作曲家、LadyGaga等当代艺术家,也可以模仿电子游戏音乐等类型。除了直接生成音乐,AI歌曲在实际应用中常用来自动作词。

网易伏羲利用自主研发的“有灵智能创作平台”,让AI学会人类语言组织的基本逻辑。借助大规模的语料训练,用户可以仅凭借输入预设风格、标签、情绪和韵脚便可以得到一首极富韵律美和意境感的歌词。例如,在设定好古风的预设风格之后,加入“夜晚”“梧桐”“叶落”“深秋”“乡愁”等标签并选定江阳韵,便得到了由人工智能创作的歌词。

此外,AI歌曲生成还有一些更有趣的玩法,比如腾讯在2020年携手明星王俊凯推出了AI歌姬“艾灵”:当用户选择关键词后,可以输入个人的名字或昵称,AI便能自动生成带有用户名字的歌词,并会生成歌声与王俊凯共同演唱。

本页网址:https://www.xinzhibang.net/article_detail-21102.html

寻求报道,请 点击这里 微信扫码咨询

关键词

深度学习 AI音频合成 语音合成

分享至微信: 微信扫码阅读

相关文章