Meta 开源 AI 语言模型 MusicGen,可将文本和旋律转化为完整乐曲

人工智能 开源
Meta 近日在 Github 上开源了其 AI 语言模型 MusicGen,该模型基于谷歌 2017 年推出的 Transformer 模型。

6 月 12 日消息,Meta 近日在 Github 上开源了其 AI 语言模型 MusicGen,该模型基于谷歌 2017 年推出的 Transformer 模型。如同模型名称所示,MusicGen 主要用于音乐生成,它可以将文本和已有的旋律转化为完整乐曲

图片 1

研发团队表示:“我们使用了 20000 小时的授权音乐来对训练该模型,并采用 Meta 的 EnCodec 编码器将音频数据分解为更小的单元进行并行处理,进而让 MusicGen 的运算效率和生成速度都比同类型 AI 模型更为出色。”

除此之外,MusicGen 还支持文本与旋律的组合输入,例如你可以提出生成“一首轻快的曲目”并同时要求“将它与贝多芬的《欢乐颂》结合起来”。

研发团队还对 MusicGen 的实际表现进行了测试。结果显示,与谷歌的 MusicLM 以及 Riffusion、Mousai、Noise2Music 等其他音乐模型相比,MusicGen 在测试音乐与文本提示的匹配度以及作曲的可信度等指标上表现更好,总体而言略高于谷歌 MusicLM 的水平。

Meta 已允许该模型的商业使用,并在 Huggingface 上发布了一个供演示用的网页应用。

IT之家附上模型地址点此前往

演示应用地址点此前往

责任编辑:庞桂玉 来源: IT之家
相关推荐

2023-08-03 07:24:40

MetaAI 语言模型

2023-07-31 16:19:47

机器人人工智能

2023-05-25 16:24:13

2023-12-08 08:00:00

人工智能MusicGen音乐模型

2010-02-24 08:54:25

AjaxSwing

2024-12-18 15:02:48

2023-08-05 13:56:03

数据音乐

2023-02-28 14:57:02

MetaAI

2023-02-25 16:14:36

AIMeta语言模型

2023-10-17 08:00:00

人工智能ColabMusicGen

2023-07-19 07:48:21

Llama 2 模型Azure AI

2024-07-19 11:50:28

2022-12-26 14:00:10

模型升级

2023-06-08 11:06:17

OpenAITigerBot

2024-12-20 08:00:00

2024-11-12 10:09:59

Go语言第三方库

2023-04-23 13:32:28

MetaAI开源

2014-05-09 09:22:51

封闭软件开源软件Difio

2023-06-12 16:04:52

谷歌音乐

2024-08-26 07:40:00

AI训练
点赞
收藏

51CTO技术栈公众号