厉害了!Adobe新出Firefly视频模型,2分钟速成高清大片

人工智能 新闻
在官方博客中,Adobe 进行了一系列 Demo 展示,从提示到成片生成时间不到 2 分钟。

在 Sora 加入 Adobe 全家桶数月后,Adobe 终于推出了自己的视频生成模型。

随着大家对新鲜、短视频内容的需求不断增长,编辑、电影制作人和内容创作者被要求在更短的时间内创作出更好的作品。如今,编辑不仅要剪辑图片,还要进行色彩校正、动画渲染、音频混合等,这些内容大大增加了工作时间。

刚刚,Adobe 宣布推出 Firefly 视频模型。Adobe 旨在利用 AI 强大的功能帮助视频内容创作者扩展他们的创意,在客户要求的时间内提供高质量的成果。

在官方博客中,Adobe 进行了一系列 Demo 展示,从提示到成片生成时间不到 2 分钟。举例来说:

提示:日落时分,雪林中驯鹿的特写镜头和细节肖像。灯光如电影般绚烂、柔和,如阳光般明媚,金色背光,梦幻般的散景和镜头光晕。色彩等级如电影般神奇。

提示:慢动作拍摄炽热的火山景观,熔岩从火山口喷涌而出。摄像机飞过熔岩,熔岩溅到镜头上。灯光具有电影感。色彩等级也具有电影感、戏剧性和高对比度。

提示:用羊毛和毛毡制成的微型可爱怪物正在跳舞,3D 渲染,柔和的灯光,梦幻般的散景,电影感。

提示:无人机上的摄像机飞过沙漠的镜头,风吹过沙丘,下面的沙子形成波浪。

图片

如果你需要更多补充画面, 以填补时间线上的空白 ,Firefly 视频模型也能帮你完成。举例来说

原始素材为:

图片

下面是根据提示生成的新片段,提示语为:透过大红色放大镜观察白色蒲公英,特写。

图片

Firefly Video 模型还能将视频序列进行组合:

图片

Firefly Video 模型还能进行相机控制,如角度、运动和缩放,从而创建完美的拍摄视角。

图片

提示:无人机在日落黄金时段拍摄雪林树木之间的场景。灯光如电影般绚烂、柔和、阳光般明媚,金色背光、梦幻般的散景和镜头光晕。色彩等级如电影般神奇。

Firefly 视频模型还适用于动画制作、特效合成。例如,给一段街舞视频添加火焰特效:

图片

图片

图片

在制作动画方面,例如给定提示:手绘简单的线条艺术,一个小孩子仰望太空,脸上带着奇妙的表情。

图片

再比如,给定提示:月亮上可爱的奶酪球在微笑,3D 渲染,octane,柔和的灯光,梦幻般的散景,背景中浮光闪闪:

图片

有时给定提示要求生成包含易读文本的高质量视频,这需要 Firefly 视频模型具备较高的「文本渲染」能力。例如,水溅和结冰的宏观细节镜头,拼写出「ICE」一词:

图片

今年晚些时候,Generative Extend 将在 Premiere Pro(测试版)中推出,将让用户可以扩展剪辑以覆盖素材中的间隙、平滑过渡或延长镜头时间,来实现完美的定时编辑。

例如,剪辑师可以在 Premiere Pro 中使用由 Adobe Firefly 视频模型提供支持的 Generative Extend 来延长镜头的保留时间,以匹配音频的渐强。

Adobe 于 2023 年 3 月首次推出 Adobe Firefly。作为营销 SaaS 巨头,Adobe 推出的 Firefly 系列模型为用户打消了内容版权、隐私安全方面的疑虑。

Adobe 表示:Firefly 视频模型的设计具有商业安全性,并且仅针对 Adobe 有权使用的内容进行训练,而绝不会针对 Adobe 用户的内容进行训练。

责任编辑:张燕妮 来源: 机器之心
相关推荐

2011-04-28 12:32:27

BD家庭影院

2023-06-27 11:53:24

AI扩图

2024-07-03 15:00:00

变量命名Python编程

2024-02-19 00:26:34

2022-12-16 09:55:50

网络架构OSI

2018-04-11 14:30:33

2017-02-23 08:00:04

智能语音Click

2011-05-06 13:43:22

投影机

2011-05-04 09:44:03

投影机

2023-07-31 11:37:05

经营分析模型

2018-05-14 22:58:14

戴尔

2021-03-01 12:06:12

Nginx命令Linux

2017-02-22 14:46:04

Leader-Foll线程

2023-05-06 06:47:46

Bing聊天机器人

2023-11-03 11:03:10

AIGen-2

2012-06-28 10:26:51

Silverlight

2014-04-28 15:23:24

搜狐视频

2016-01-25 10:48:15

大数据框架HadoopSpark

2024-07-05 09:31:37

2024-04-25 07:10:00

图像生成模型AdobeAI 模型
点赞
收藏

51CTO技术栈公众号