MusicLM：基于文本描述生成高保真音乐的AI音乐生成器

新知榜官方账号

2023-07-03 14:00:28

简介

MusicLM是谷歌于2023年1月推出的一种AI音乐生成器，能够基于文本描述生成高保真的音乐。本文介绍了AI音乐生成的历史、现状和发展方向，并深入分析了MusicLM的原理和应用。

历史回顾

AI生成音乐的历史悠久，早在上世纪90年代，音乐学教授David Koepp写出了第一个程序——EMI，能够谱出协奏曲、合唱曲、交响乐和歌剧。2016年，三位音乐家企业家创立AIVA technology，利用AI创作音乐。AIVA能够为电影、广告、游戏、预告片和电视节目创作情感配乐。

最近的RIFFUSION使用AI图像生成引擎Stable Diffusion将文本提示转换为频谱图，然后再转换为音乐。OpenAI在2020年发布了一款名为“Jukebox”的AI音乐生成器。通过输入流派、艺术家和歌词，Jukebox能够输出从头开始制作的新音乐样本。

技术现状

目前，各种生成模型的最先进技术主要由基于Transformer的自回归模型或基于U-Net的扩散模型所主导。尽管生成具有长期一致性的高质量音频是一个挑战，但最近有一系列方法解决了这个问题。

MusicLM的原理和应用

MusicLM主要分为两个部分：首先，它接受一系列音频标记，并将它们映射到字幕中的语义标记进行训练。第二部分接收用户字幕和/或输入音频，并生成声学标记。MusicLM可以生成符合场景的音乐，也可以建立在现有的旋律之上，同时还具有故事模式，能够将几种描述拼接在一起，创造出唤起特定情感的配乐。

发展方向和风险

未来，AI研究人员将继续改进音乐生成技术，直到每个人都能通过描述创造出任何风格的工作室质量的音乐。但AI音乐生成技术也存在一些风险，例如生成的样本将反映训练数据中存在的偏差，这就提出了对训练数据中代表性不足的文化进行音乐生成的一些问题，同时也引发了对文化挪用的担忧。

本页网址：https://www.xinzhibang.net/article_detail-4920.html

寻求报道，请

关键词

分享至微信：

相关工具

Notta

AI在线将语音转换成文字

Resemble.ai

AI人声生成工具

Voicemaker

AI文本到语音生成工具

Adobe Podcast

Adobe推出的在线AI音频录制和编辑工具

NaturalReader

AI文本转语音工具

悦音配音

AI智能在线配音语音合成工具

AI音乐，网易云音乐的生产力与商业化思考

背景网易云音乐是一家流媒体平台，旨在为用户提供音乐产品。然而，由于音乐版权的掌控，流媒体平台处于议价弱势地位，难以获得更多收益。AI音乐对音乐产业的影响AI音乐是一种新兴的技术，可以辅助音乐人进行音乐创作和制作。AI音乐的出现，改变了传统的音乐创作方式，使得音乐制作更加自由和便捷。网易云音乐在AI音

分类标签网易云音乐AI音乐音乐产业生产力商业化

11-30 08:25

荣耀100系列发布会：网易云音乐联合荣耀推出AI智能配乐和音乐应用

11月23日，荣耀100系列产品发布会上，网易云音乐联合荣耀发布全新合作成果——AI智能配乐功能以及由网易云音乐深度定制的音乐应用。通过双方紧密合作和联合共创，将为荣耀手机用户带来更丰富、更悦耳的音乐体验。荣耀100系列产品发布会上，荣耀公司CEO赵明现场发布并演示了由网易云音乐和荣耀联合共创的AI

分类标签荣耀100系列AI智能配乐音乐应用

11-30 08:24

利用AI提高工作效率和赚钱效率

利用AI提高工作效率和赚钱效率现在AI、ChatGPT可以说是非常火，国内外也涌现了一大批AI聊天工具。最火的就是ChatGPT了，其他比如：国外:ChatGPT：可以说是最强AINotion：非常高效的写作软件AutoGPT：有人评价潜力不弱于ChatGPTClipdrop:图片设计神器midjo

分类标签 AIChatGPT工作效率赚钱

11-25 16:14

图片背景替换与物体智能擦除

图片背景替换与物体智能擦除随着现代图像编辑工具的不断发展，我们可以更方便地处理各类图片。但在一些情况下，过往拍摄的相片中可能会出现一些意外出现的物体或者背景元素，这些因素可能会影响到整个画面的美学效果，甚至妨碍了我们所传递的主题情感。为了解决这类困扰，我们推荐了几个杰出的图片背景置换及物体一键清除工

分类标签图片背景置换物体一键清除图像编辑工具

11-25 16:13

小冰公司与网易云音乐联手推出AI歌手音乐创作软件“网易云音乐·XStudio”

小冰公司与网易云音乐联手推出AI歌手音乐创作软件“网易云音乐·XStudio”小冰公司与网易云音乐宣布达成战略合作，双方联合推出的AI歌手音乐创作软件“网易云音乐·XStudio”已正式上线，面向广大音乐人和音乐爱好者免费使用。该软件是全球主流音乐平台与人工智能公司联手打造的首个同类产品。软件首发1

分类标签小冰公司网易云音乐AI歌手音乐创作软件

11-24 02:17

网易云音乐TV版全新升级，杜比全景声、超清母带等高品质音质助力家庭娱乐

音质升级助力家庭娱乐为了进一步满足用户对高品质音乐和个性化需求的追求，近日，网易云音乐针对TV版产品进行了重磅更新，将杜比全景声、超清母带、沉浸环绕声、高清臻音等高品质音质带到TV版产品上，让所有大屏用户在家中也能尽享音乐美好。据悉，9月22日-10月2日期间登录的用户即可享受限免体验。自成立以来，

分类标签网易云音乐TV版杜比全景声高品质音质家庭娱乐

11-24 02:16

QQ音乐和网易云音乐的吉他谱识别功能对比

背景学习过吉他之类的乐器的读者应该有过这样的困扰——在想学习自己喜欢的流行歌曲时，网上搜谱出来的结果良莠不齐，且要价不菲；在觉得自己可以听谱的时候，却发现耳朵并没有办法快速准确地分辨歌曲里的某个特定乐器的声音，最后只能不了了之。令人惊喜的是，近期《QQ音乐》上线了「查看曲谱」的功能，可以通过智能算法

分类标签 QQ音乐网易云音乐吉他谱识别功能流行歌曲曲谱库

11-24 02:15

网易云音乐与小冰XStudio联手推出AI歌手创作工具

网易云音乐与小冰XStudio联手推出AI歌手创作工具据IT之家11月18日消息，网易云音乐与小冰XStudio共同发布了AI歌手创作工具，推出了苹果和Windows两个版本。Windows支持Win10及以上，MacOS支持10.15及以上。用户可以从云端获取数十位歌手，只需要提供midi和歌词，

分类标签网易云音乐小冰XStudioAI歌手创作工具

11-24 02:13

中国式浪漫

中国式浪漫中国式的浪漫有着独特的韵味，充满了婉约而华贵的情感。从古至今，我们常常可以看到一些文艺作品中描绘的恋人们穿越古代的长廊，相互倾诉着深情而含蓄的爱意。这种浪漫，不单单是一种场景的表达，更多的是一种文化的传承。东方之美，婉约而华贵的爱在现代社会中，这种东方之美依然在中国式的爱情中得以体现。例如

分类标签中国式浪漫婉约华贵传统现代融合

10-27 02:17

中国式浪漫

中国式浪漫中国式的浪漫有着独特的韵味，充满了婉约而华贵的情感。从古至今，我们常常可以看到一些文艺作品中描绘的恋人们穿越古代的长廊，相互倾诉着深情而含蓄的爱意。这种浪漫，不单单是一种场景的表达，更多的是一种文化的传承。在现代社会中，这种东方之美依然在中国式的爱情中得以体现。例如，现代新人在婚礼上常常选

分类标签中国式浪漫爱情文化传承

10-21 09:06