微软发布 AI 声音生成工具 VALL-E,只需 3 秒音频即可模仿人说话

人工智能
微软最近发布了一款名为 VALL-E 的人工智能工具,只需 3 秒音频即可模仿人说话。

1 月 10 日消息,微软最近发布了一款名为 VALL-E 的人工智能工具,只需 3 秒音频即可模仿人说话。

该工具经过 60000 小时英语语音数据的训练,并使用特定语音的 3 秒剪辑来生成内容。与目前的许多人工智能工具不同,VALL-E 可以复制说话者的情绪和语气,即使说话者本人从未说过的单词也可以模仿。

IT之家了解到,康奈尔大学的一篇论文使用 VALL-E 合成了几种声音,大家可以在 ​​GitHub 上聆听这些 AI 合成的音频​​。

研究人员指出,在许多情况下,Vall-E 的性能优于当前的文本到语音转换模型。然而,该研究还写道,人工智能模型目前存在几个问题。例如,文本提示中的某些单词可能会发音不清晰、完全遗漏或在输出中出现两次。此外,该模型目前难以模仿某些声音,尤其是带有口音的声音。

像其他 AI 新技术一样,VALL-E 在安全、伦理等方面也引发了担忧。微软发布了关于使用 VALL-E 的道德声明,但未来的使用用途方面没有明确说明。

目前,微软 Vall-E 尚未开源。微软已经在 GitHub 上创建了一个 ​​Vall-E 存储库​​,但目前只包含一个描述文件。

责任编辑:庞桂玉 来源: IT之家
相关推荐

2023-01-12 15:28:55

微软VALL-E语音

2024-07-24 11:36:02

2023-05-16 14:17:00

数字人

2020-09-08 08:50:58

微软机器学习机器人

2024-01-29 13:03:00

框架3DHM视频

2023-03-22 11:06:32

2023-01-11 12:51:04

微软音频

2023-11-17 06:31:39

2024-11-08 17:34:38

2023-07-14 09:41:01

3DAI

2021-04-02 14:29:04

黑科技人工智能虚拟

2023-10-18 10:35:50

微软AI

2024-11-21 15:36:49

微软AI Shell

2024-03-27 12:46:36

AI模型

2023-06-19 13:22:51

模型音频

2021-04-12 13:36:59

开源技术 工具

2020-01-15 11:12:28

工具代码开发

2019-10-28 09:59:49

Python工具Windows
点赞
收藏

51CTO技术栈公众号