快手王仲远:AI音乐为短视频带来强大助力

新知榜官方账号

2023-11-17 02:12:21

2021全球人工智能技术大会“发展与挑战”专题论坛在杭州举行。快手技术副总裁、MMU&Y-tech负责人王仲远出席论坛并发表《音乐与技术的碰撞交融——艺术如何随时代变迁》主题演讲,分享快手在AI音乐方面的动态与进展,充分展现快手领先的人工智能技术,以及AI音乐为短视频带来的强大助力。

作为国民短视频APP,快手拥有海量内容、超大流量和高用户粘性。在丰富的快手社区生态中,音乐成为激励用户创作的因素之一。在快手,76%的快手作品有配乐,90%的快手用户期望大部分短视频有配乐。为何用户在创作短视频时,对于音乐有如此强的依赖性?

王仲远表示:“对于短视频的制作体验而言,音乐的正向影响至关重要。比如唯美风短视频如果去掉背景音乐只剩原始声音,就会削弱其氛围感,给用户留下与之前截然不同的印象。”对此,王仲远进一步分析了音乐的独特魅力。在他看来,音乐可以与人的思想情绪联系在一起,能够让人感到欢喜,感到悲伤,感到期待等。

如今,步入人工智能时代,AI技术则帮助音乐实现全面的个性化和智能化,为音乐和短视频带来了新的发展空间。快手自主研究了AI音乐创作模型和AI歌手。确定好动机之后就可以利用快手AI模块生成歌词。在AI歌词方面,快手针对数百万已有歌曲对模型进行重新训练,以确保AI可以很好地理解词义,让用户只需输入一个主题、一个情感、一个风格,就能在数秒内生成数十首歌词。在AI旋律的创作上,快手也采用类似方法,搭建了数十万首曲谱和百万首歌曲音频训练模型再通过迷你数据库让模型自监督学习歌曲的内在关联,从而训练AI旋律生成的能力。

录制一首高质量的成品歌曲,对歌手的演唱水平要求极高。为了解决部分用户面临的唱歌跑调、音色不好听等问题,快手则推出了AI歌手辅助创作功能,并不断提升其模型的精准度。据介绍,2020年5月,AI歌手的演唱还是KTV水平;到2020年12月,普通人已经很难发现AI歌手演唱中的瑕疵;如今,模型会根据曲谱自动调整音高、节拍和歌词,AI歌手可以逼真地还原出专业级歌手的演唱水平。

未来,快手还将探索更多新技术,丰富生成侧的玩法。借助语音识别技术,快手希望AI歌手将来可以模仿个人音色,AI音乐则能够把说的话直接转成歌曲,满足用户更个性化的音乐创作需求,持续助力短视频领域创作。

本页网址:https://www.xinzhibang.net/article_detail-20229.html

寻求报道,请 点击这里 微信扫码咨询

关键词

快手 AI音乐 短视频

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯