YouTube与GoogleDeepMind推出新服务:DreamTrack能用文本提示生成音乐和歌曲

新知榜官方账号

2023-11-30 22:11:18

背景介绍

YouTube和GoogleDeepMind合作推出了一款新服务——DreamTrack。该服务仅需输入文本提示或哼唱几句,就能生成引人入胜的音乐和歌曲。这款新服务通过GoogleDeepMind提供的最复杂的AI音乐生成系统Lyria实现。目前已有9位流行音乐人参与了这项合作,包括TroyeSivan、DemiLovato、JohnLegend、Sia等。DreamTrack可自动生成模仿某音乐人声音、风格的30秒音乐曲目,甚至包括歌词。

DreamTrack的具体应用

用户只需输入提示,比如文字输入「佛罗里达州一个阳光明媚的早晨,R&B」,再选择美国饶舌歌手T-Pain:马上就能得到一段30秒的音乐,里面歌手的声音是T-Pain,连歌词都替你生成了(当然,你也可以自己写)。DreamTrack填补了YouTube之前推出的DreamScreen服务的不足,让短片配上独特的背景音乐。

MusicAI的应用

除了DreamTrack,还有一个名为MusicAI的工具。MusicAI是谷歌与艺术家、歌曲作者和制作人一起设计的一套工具,辅助用户音乐创作。随便唱一段旋律就能变成一段管弦乐演奏的曲子、将MIDI键盘上的和弦变成真实合唱团的演唱或者给一段口技打击乐配上鼓点。MusicAI也是基于Lyria模型实现的。

Lyria模型的特点

Lyria模型擅长使用器乐和人声生成高质量的音乐,在转换和保持音乐延续性方面做的不错,能让用户更细致地控制输出的风格和效果。然而,音乐生成对于AI来说仍然具有挑战性,因为音乐包含大量的信息,包括每一秒的节拍、音符和和声。当生成长序列声音时,AI模型很难在乐句、副歌和章节段落之间保持音乐的连续性。由于音乐通常同时包含多种声音和乐器,创作起来也比语音难得多。但是,随着技术的不断进步,AI模仿艺术家的声音和风格也越来越成熟。

新工具的风险与挑战

使用AI模仿艺术家的声音和风格的做法一直令人担忧,也颇具风险。今年早些时候,环球音乐集团提出版权侵权索赔,要求从YouTube和其他平台上删除一首席卷各社交媒体平台的AI生成的歌曲「HeartonMySleeve」。DeepMind在博客文章中表示,使用Lyria创建的音轨将带有SynthID水印,人耳听不到,也不会影响聆听体验,以此保证版权问题的解决。

本页网址:https://www.xinzhibang.net/article_detail-21543.html

寻求报道,请 点击这里 微信扫码咨询

相关工具

相关文章

相关快讯