Sora/可灵/海螺/混元等大PK!多场景对比,现在谁是最强视频生成模型?

人工智能 新闻
Runway是美国目前最受欢迎的视频生成模型之一,很多创作者已经用它来进行视频生产了。

OpenAI的正式版Sora终于上线了!

不过,在Sora缺席的10个月里,Runway可灵海螺混元等等模型都横空出世,有的甚至都卷出了自己的特色风格和功能,比如Runway的多帧修改、可灵生成的表情更加自然、海螺的二次元风格等等。

图片

接下来我们就来一起看看,Sora和这些模型的对比效果究竟如何吧!

Round1:对比Runway

Runway是美国目前最受欢迎的视频生成模型之一,很多创作者已经用它来进行视频生产了。

下面我们就一起来看看3个Runway Gen3与Sora的对比

场景一:罗马教堂风的视频

先让两个模型都生成一些罗马教堂风的视频,可以看出来两个模型的重点不太一样,Sora生成了一个会议的场景,而Runway生成的视频更类似于节日聚会。

图片

图片

场景二:生成人物行走视频

这次生成的是一个男人穿着圣诞衣服在冬天的雪地里行走,两个模型的生成效果都很不错,Sora生成的更有故事感一些,还有背景变换和镜头切换。

图片

图片

场景三:根据输入的靴子图片自动生成视频

这次Sora的表现就出现了一些反常识的现象,从静止的靴子里面又出现了另一双走动的靴子,Runway生成的效果就好多了。

图片

有网友看完也是立马锐评到:看起来OpenAI是用UI设计来弥补模型效果不佳。

图片

Round2:对比可灵

对比完两个外国模型,把我们国产模型也拉出来比划一下!

首先请出的是非常受欢迎的可灵模型,不仅是这次效果对比中有很多网友都用到了它,在过去的几个月中可灵也收获了很多用户。

场景一:Sora VS 可灵 VS Runway

金毛狗狗在美术馆中奔跑(Sora展示的官方场景之一)

图片

三个模型在光影处理、动物毛发光泽和运动姿态方面处理得都很优秀,这一局有点难分上下,评论区里面喜欢Sora和可灵的都有。

图片
图片

场景二:Sora VS 可灵

根据输入的图片生成视频,没有提示词。

图片

图片

可灵生成的视频看起来似乎动作更加流畅一些,不过Sora的画面切换也是很有蒙太奇的感觉。

Round3:对比海螺、混元

国产模型还有更多选手申请出战!

接下来有请海螺模型和混元模型上场。海螺自从推出以来就一直在VBench榜单上名列前茅,混元模型虽然开源不久,但是也有很多艺术家都进行了创作尝试。

下面一起看看他们的表现:

场景一:Sora VS 可灵 VS 海螺,图生视频

这道题就是一个非常考验模型想象力的题目了,同样是图生视频,三个模型根据一个人站在金字塔下的身影进行视频生成。Sora和可灵的主题都比较偏向“末世”的感觉,海螺有点“异世界”战斗即视感。

图片

图片

图片

场景二:Sora VS Runway VS 可灵 VS 海螺

输入是“维京演员的情感表现,摄像机推进至演员皱眉的脸部”。

Sora生成的视频中还有拍摄演员的视角变化,很有趣。可灵和海螺在处理面部表情时更加自然。

图片

图片

图片

场景三:Sora VS 可灵 VS 混元

再来看看最后一个测试,让模型们幻想月球上面宇航员的活动。

可以看出来,每个模型都有自己的偏好,Sora的视频镜头变化更多、可灵的场景更加细致、混元的更有故事感。

图片

图片

Round4:视频忠诚一致性检测

网友Shaun Ralston还用自己的猫猫测试了一下Sora生成视频中物体的一致性。

首先来看看他的真猫写真:

图片

下面都是Sora根据输入的图像生成的AI猫猫图像,看起来基本上和真实的猫差别不大,而且视频中的动作也非常自然。

One More Thing

Sora正式版推出之后,大家最关心的除了效果可能就是价格了。

目前Sora只向Plus会员(每月20刀)和Pro会员(每月200刀)开放。具体来看,Plus会员每月最多可生成50支视频,720p分辨率最多生成5秒,480p分辨率可以生成10s。Pro会员每月可生成500支视频,支持1080p、20s、同时生成5个视频,还支持无水印下载。

但是,独立电影制作人el.cine在X上发推表示,如果你想要用包含人物的图像来生成视频,这个功能目前只对Pro用户开放!

责任编辑:张燕妮 来源: 量子位
相关推荐

2024-02-19 07:58:01

OpenAI模型GPT

2024-06-14 09:12:06

2024-03-18 09:38:42

腾讯清华模型

2024-03-25 00:30:00

AI框架

2024-02-19 08:31:10

SoraAIOpenAI

2024-12-09 09:20:00

AI视频生成

2024-05-22 18:10:38

2024-04-07 14:56:22

技术应用

2024-09-05 16:37:37

2024-10-16 14:10:00

AI视频生成

2024-02-26 16:55:51

Sora人工智能

2024-09-24 15:51:02

2023-10-23 10:11:36

自动驾驶技术

2024-02-19 09:19:54

OpenAIAI模型人工智能

2024-02-19 00:05:00

视频AI

2024-10-15 14:08:06

2023-04-03 10:04:44

开源模型
点赞
收藏

51CTO技术栈公众号