Meta 发布开源 AI 工具 AudioCraft,用户可通过文本提示创作音乐、音频

人工智能
今年 6 月份 Meta 开源了 AI 语言模型 MusicGen,该模型基于谷歌 2017 年推出的 Transformer 模型。如同模型名称所示,MusicGen 主要用于音乐生成,它可以将文本和已有的旋律转化为完整乐曲。

 8 月 3 日消息,美国东部时间 8 月 2 日,Meta 开源了一款生成式 AI 工具 AudioCraft,可帮助用户通过文本提示创作音乐和音频。

图片 3图片 3

根据 Meta 官方介绍,AudioCraft 包含了三个核心组件:

  • MusicGen:使用 Meta 拥有 / 特别授权的音乐进行训练,根据文本提示生成音乐。
  • AudioGen:使用公共音效进行训练生成音频或扩展现有音频,后续还可生成环境音效(如狗叫、汽车鸣笛、木地板上的脚步声)。
  • EnCodec(改进版):基于神经网络的音频压缩解码器,可生成更高质量的音乐并减少人工痕迹,或对音频文件进行无损压缩。

Flow chart demonstrating how MusicGen and AudioGen workFlow chart demonstrating how MusicGen and AudioGen work

该工具经过开源之后,相关研究人员和从业人员可以使用自己的数据集训练模型。官方宣称 AudioCraft 系列模型能够长期稳定地生成高质量音频,而且易于使用,能够为音乐家和声音设计师“提供灵感”,帮助他们快速集思广益,并“以新的方式迭代他们的作品”。

另据IT之家此前报道,今年 6 月份 Meta 开源了 AI 语言模型 MusicGen,该模型基于谷歌 2017 年推出的 Transformer 模型。如同模型名称所示,MusicGen 主要用于音乐生成,它可以将文本和已有的旋律转化为完整乐曲。

AudioCraft 项目地址:点此前往

责任编辑:姜华 来源: IT之家
相关推荐

2023-08-05 13:56:03

数据音乐

2023-08-04 17:33:27

Meta音频AI

2013-04-27 13:36:52

Chrome

2023-04-23 13:32:28

MetaAI开源

2023-11-28 12:04:06

AI人工智能

2023-12-12 08:26:11

ClipchampAI 自动创作AI 文本转语音

2020-01-13 18:23:58

WindowsWindows 7Windows 10

2023-06-12 14:15:38

AI开源

2024-01-16 18:13:46

开源AudacityAI 工具

2023-06-12 16:04:52

谷歌音乐

2022-02-23 11:28:05

Windows 11WSAPlay Store

2023-07-06 07:48:09

Threads应用

2023-05-12 07:54:15

Meta人工智能广告工具

2023-09-28 20:57:23

Meta人工智能聊天机器人

2023-10-13 08:02:44

谷歌AI

2020-12-02 15:28:23

AI

2023-05-10 07:07:23

开源人工智能

2022-12-05 19:59:18

开源音频资源

2023-06-09 08:35:54

2017-04-24 14:35:18

开源工具
点赞
收藏

51CTO技术栈公众号