“视频领域的Midjourney”!AI视频生成新秀Gen-2内测作品流出,网友直呼太逼真

人工智能
虽然说这组科幻的效果相比“酒吧男人接受采访”稍显逊色,但神奇的是,它和AI图像生成模型诞生之初的那种“混沌不清”的味道可以说不相上下——仿佛看到了Stable diffusion等AI当时的影子。

号称可以一句话拍大片的AI视频生成工具Gen-2,开始露出庐山真面目。

有推特博主已经率先拿到了内测资格。

这是他用提示词“一个身材匀称or对称(symmetrical)的男人在酒吧接受采访”生成的结果:

只见一个身着深色衬衣的男人正望着对方侃侃而谈,眼神和表情透露着一股认真和坦率,对面的人则时不时点头以示附和。

图片

视频整体非常连贯且画质很是清晰,乍一看,真实访谈感满满有没有!

同样的提示词生成的另一个版本也不赖:

这次镜头更加拉近,背景更逼真,人物则仍然富有表现力。

图片

有网友看完这组作品直呼:

太不可思议了吧,只靠文字提示就能生成这样的结果!

图片

还有人直言:

这是视频领域的Midjourney来了。

图片

博主实测Gen-2

这位博主名叫Nick St. Pierre,专门在推上分享他用AI制作的作品。

图片

除了开头所见的写实风,他还发布了一组Gen-2的科幻作品。

比如“宇航员穿越太空”:

图片

“一名武装士兵沿着宇宙飞船的走廊奔跑,身后一道黑影摧毁了墙壁”:

“一家在人类动物园吃微芯片的机器人”:

图片

“人形机器人大军在冰冻的平地上进行殖民”:

图片

(有种权游里面异鬼大军进击长城的气势……)

“地球上最后一个人看着入侵的宇宙飞船降落在东京上空”:

图片

……

以上这些全部都只凭一句提示词就能完成,不需要借鉴其它图片和视频。

虽然说这组科幻的效果相比“酒吧男人接受采访”稍显逊色,但神奇的是,它和AI图像生成模型诞生之初的那种“混沌不清”的味道可以说不相上下——仿佛看到了Stable diffusion等AI当时的影子。

如Nick St. Pierre表示:

Gen-2还处于婴儿期,后面一定会更好。

我们也在网上找到了其他已经拿到内测资格的人测试的一些效果:

图片


图片

图片

可以说,除了比较难的科幻作品,其它它拿捏的都还不错的亚子。

AI视频生成也狂飙

专攻视频生成的AI工具Gen-2于3月20日发布(论文3月11号)。

图片

作为AIGC领域的新秀,它的迭代速度和质量也是相当快了:

Gen-1版本2月才刚诞生,那会还只能对已有视频进行编辑;

现在Gen-2就已经可以用文字和图像作为提示词直接生成视频了。

官方号称它为“生成式AI的下一步”,宣传语给的也是很霸气:

say it,see it。(只要你能说出来,我就能让你看到)

Gen-2的更新一口气带来了八大功能:

文生视频、文本+参考图像生视频、静态图片转视频、视频风格迁移、故事板(Storyboard)、Mask(比如把一只正在走路的小白狗变成斑点狗)、渲染和个性化(比如把甩头小哥秒变海龟人)。

图片

它的出现和AI绘画一样,让人看到了影视、游戏和营销等领域暗藏的巨大变革。

其背后开发公司也值得说道,它就是Runway。

Runway成立于2018年,为《瞬息全宇宙》特效提供过技术支持,也参与了Stable Diffusion的开发(妥妥的潜力股)。

图片

提示:Gen-1已经可以开始玩了(125次机会用完之后就只能按月付费了),Gen-2还没有正式对公开放。

图片

除了Gen系列,微软亚研院还最新发布了一个可以根据文字生成超长视频的AI:NUWA-XL。

只用16句简单描述,它就能get一段长达11分钟的动画:

图片

在往前一点儿,就在Gen-2发布同一天,阿里达摩院也开源了17亿参数的文本转视频AI:

图片

效果是酱婶的:

图片

……

可以预见,不止图像生成,视频领域也要变得热闹起来了。

咳咳,所以下一波大众AI狂欢,会是它吗?

参考链接:
[1]​​​https://twitter.com/nickfloats/status/1644540896321437696​​​
[2]​​​https://twitter.com/nickfloats/status/1644081726141132800​​​
[3]​​​https://research.runwayml.com/gen2​​​
[4]​​​https://twitter.com/c_valenzuelab/status/1645158717766115328​​​
[5]​​​https://modelscope.cn/models/damo/text-to-video-synthesis/summary​​​
[6]​​​https://nuwa-infinity.microsoft.com​

责任编辑:武晓燕 来源: 量子位
相关推荐

2024-01-22 07:10:00

AI视频

2023-11-17 22:50:08

模型AI

2023-12-20 14:54:29

谷歌Gen-2视频

2024-01-11 12:45:12

AI训练

2023-11-21 21:27:32

AI图片

2023-03-29 14:55:59

技术作图

2023-11-03 11:03:10

AIGen-2

2024-10-28 07:30:00

2023-11-03 12:36:03

AI模型

2023-12-12 13:45:00

模型训练

2023-07-27 14:25:30

模型AI

2024-11-08 17:34:38

2024-07-30 11:50:00

视频生成

2024-07-05 14:29:49

2024-01-22 08:59:00

AI

2023-02-06 09:31:07

视频图像

2024-07-01 13:02:53

2023-07-05 15:55:07

ISV

2023-04-03 10:04:44

开源模型

2023-12-20 15:26:13

AI谷歌
点赞
收藏

51CTO技术栈公众号