文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。 除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。

随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。


这种开源的AI模型MusicGen,顾名思义其实就是一种深度学习语言模型,该模型基于谷歌2017年推出的Transformer模型,并采用Meta的EnCodec编译器将音频数据分解为小单元处理,让用户可直接根据文本提示和旋律提示创作音乐。


前段时间,Meta人工智能研究工程师Felix Kreuk还曾在Twitter上向大众展示了MusicGen的功能。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

据了解,Meta的介绍,由Synnaeve领导的团队曾使用了2万小时的授权音乐对MusicGen进行训练,其中包括来自内部数据集的来自媒体内容服务商ShutterStock和Pond5 10000首“高质量”授权音乐和390000首纯音乐。


与此同时,Meta自己还将MusicGen与市面上已有的音乐创作软件MusicLM(谷歌旗下)、Riffusion以及Mousai作了比较。


据Meta表示,无不管是在与文本的匹配度上,还是在作曲的可信度上,MusicGen的表现似乎更加惊艳,都更胜一筹。


目前,Meta尚未提供用于训练模型的代码,但提供了预训练模型。用户如果想要亲身感受,可以通过Hugging Face上的API体验MusicGen,除了文本提示外,还可搭配音频一同作为生成音乐的条件。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

在确定提示信息后,便可让MusicGen生成一段12秒的音频但生成音乐。不过可能需要一些时间,其具体等待时长将取决于同时在线的用户数量和用户所设置的提示信息。


从AI孙燕姿到MusicGen,从演唱到创作,AI已经全面入侵音乐领域。然而,MusicGen 能否能够成为一款优秀的音乐生成模型,可能还待更多用户的验证。

本站文章均为原创,版权归本站所有,如需转载或引用请注明出处如:“本文章转载自:

文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”! - Extfans”

相关标签

上一篇:马斯克旗下脑机接口公司,今年将进行首例人体试验

下一篇:Let's Play Infinity Games!夏日消暑小游戏特辑