文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

sxkk20082年前智能百科206
随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。 除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。

随着聊天机器人ChatGPT的兴起,人们早已尝试将生成式人工智能(AI)技术应用于包括音乐在内的多个领域。年初,谷歌曾推出音乐生成大模型 MusicLM,并于5月向上月向所有用户开放,其效果非常不错。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

除了谷歌的MusicLM外,目前较为常见的音乐模型还有Riffusion、Mousai和Noise2Music等。而近日,Meta在Github上推出了允许商业使用的名为MusicGen的开源AI模型,引发了外界的广泛关注。


这种开源的AI模型MusicGen,顾名思义其实就是一种深度学习语言模型,该模型基于谷歌2017年推出的Transformer模型,并采用Meta的EnCodec编译器将音频数据分解为小单元处理,让用户可直接根据文本提示和旋律提示创作音乐。


前段时间,Meta人工智能研究工程师Felix Kreuk还曾在Twitter上向大众展示了MusicGen的功能。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

据了解,Meta的介绍,由Synnaeve领导的团队曾使用了2万小时的授权音乐对MusicGen进行训练,其中包括来自内部数据集的来自媒体内容服务商ShutterStock和Pond5 10000首“高质量”授权音乐和390000首纯音乐。


与此同时,Meta自己还将MusicGen与市面上已有的音乐创作软件MusicLM(谷歌旗下)、Riffusion以及Mousai作了比较。


据Meta表示,无不管是在与文本的匹配度上,还是在作曲的可信度上,MusicGen的表现似乎更加惊艳,都更胜一筹。


目前,Meta尚未提供用于训练模型的代码,但提供了预训练模型。用户如果想要亲身感受,可以通过Hugging Face上的API体验MusicGen,除了文本提示外,还可搭配音频一同作为生成音乐的条件。


文字生成音乐!Meta发布了“开源的”“音乐界的ChatGPT”!

在确定提示信息后,便可让MusicGen生成一段12秒的音频但生成音乐。不过可能需要一些时间,其具体等待时长将取决于同时在线的用户数量和用户所设置的提示信息。


从AI孙燕姿到MusicGen,从演唱到创作,AI已经全面入侵音乐领域。然而,MusicGen 能否能够成为一款优秀的音乐生成模型,可能还待更多用户的验证。

相关文章

Shulex AI聊天AI 助手插件,AI聊天侧边栏电商 AI 助手

Shulex AI聊天AI 助手插件,AI聊天侧边栏电商 AI 助手

Shulex AI 聊天 AI 助手插件是首款为电商卖家打造的 AI 聊天插件侧边栏工具,适用于 Chrome 浏览器,无需 AI 聊天账户即可进行便捷访问,可支持在所有主要的电子商务网站上都可免费与...

AI聊天for Google插件,AI 图像生成器与网页AI聊天

AI聊天for Google插件,AI 图像生成器与网页AI聊天

AI 聊天 for Google 插件是一款可在 Google 、 Bing 、百度、 DuckDuckGO 等搜索引擎中使用 AI 图像生成器和 AI 聊天的工具,该插件可使每个网页上都有 AI 聊...

九牧:高端的进击

九牧:高端的进击

作者 | 段传敏(战略营销观察家) 进入2024年的家居建材业市场依然冰寒。一些企业顶不住压力开始加入内卷之列,以降价和促销寻找喘息之机。是的,“高端”二字看起来...

Stable Diffusion XL 0.9 重磅发布,35 亿 + 66 亿双模型,AI 图像生成飞跃式进步

Stable Diffusion XL 0.9 重磅发布,35 亿 + 66 亿双模型,AI 图像生成飞跃式进步

近日,最新版本的 Stable Diffusion XL 0.9(SDXL 0.9)已经发布,并与之前的模型相比,在图像和构图细节上有了重大突破。Stable Diffusion XL 0.9 在与...

解决方案提供商V2 INDONESIA携手涂鸦智能,助推印尼智能家居市场飞速发展

解决方案提供商V2 INDONESIA携手涂鸦智能,助推印尼智能家居市场飞速发展

 5月29日,在2024 TUYA全球开发者大会上,印尼领先的解决方案提供商V2 INDONESIA,PT(以下简称:V2)与全球化云开发者平台涂鸦智能(NYSE: TUYA,H...

九九重阳节,我们一起帮老人“防跌倒”

九九重阳节,我们一起帮老人“防跌倒”

你知道吗?“跌倒”这件看似平常的小意外,却是我国65岁以上老人伤害死亡的首位原因。 九九重阳节,浓浓敬老情,今年重阳节是我国第十二个法定老年节,贝壳公益杭州站携手...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。