日本CG大神又整活了!3D建模软件拿来搞面部实时捕捉

人工智能 新闻
开发者横原大和(Hirokazu Yokohara) 是日本的一位“全才”艺术家,3D建模、场景、特效、甚至像这种沾边前沿科技的活儿都会做。

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。

最近,拿Maya加一个换脸软件就能做到的实时面部捕捉在日推火了:

不管怎么挤眉弄眼,褶子和肌肉的细微变化都跟得上。

连续两个演示视频点赞分别突破4k和3k,甚至被网友评价为“效果好得有点可怕”。

怎么说呢……直接杵一个脸在摄像头前,就能实时替换脸部表情确实更方便。

至少和满脸小点+机械装置比起来,不再那么密恐福利了……

开发者横原大和(Hirokazu Yokohara) 是日本的一位“全才”艺术家,3D建模、场景、特效、甚至像这种沾边前沿科技的活儿都会做。

比如我们之前介绍过的那位在电车上啾咪顺拐的萌妹,也是出自这位大神之手:

接下来,我们先从他这次所用的技术开始了解。

又见DeepFake

横山提到,他在几天前看到有人将UE5和DeepFace Live结合起来,直接合成了一个视频:

于是他便也起了心思,打算用Maya试试看。并且他还实现了实时面部捕捉的效果。

具体来说,技术方案是Maya + 换脸软件DeepFace Live

其中Maya是有软件自带的面部绑定系统。

而DeepFace Live听名字就知道,与曾经爆火的DeepFake有关。

这是一种利用机器学习中的深度学习实现的深度视频换脸的技术,基于这种技术诞生了无数的下载即用,甚至在线可玩的工具和软件。

(肌肉金轮就是其成果之一)

DeepFace Live就是其中一种。

这是一个去年刚刚公开的开源工具,特点是可以在流媒体或直播视频中实时换脸,也就是说让用户通过网络摄像头应用面部过滤器,与大多数基于视频的流媒体和信息服务结合使用。

比如常见的Skype,Zoom,Tik Tok,Twitch上都可以使用:

当然,DeepFaceLive的人脸交换功能也可以应用于预先录制的视频。

开发者是来自俄罗斯的Iperov,同时,他也是曾经应用最广泛的DeepFaceLab的开发者质之一。

开发者也是老二刺猿了

至于这位横原大神本身,我们开头介绍过,这是一位在各领域都造诣颇深的通才。

他来自东京的khaki工作室,主要负责为CM,MV,动画,大型游戏等各种媒体或设备设计视觉特效(VFX)。

不说工作室的名字,只说他们的作品,总有一款你熟悉的。

比如阴阳师2017年的这个宣传PV:

2020年的VR游戏设备hexaRide中的第一款合作游戏,《攻壳机动队》的CG:

还为世界第一的公主殿下做过MV:

怎么说呢,老二刺猿了。

责任编辑:张燕妮 来源: 量子位
相关推荐

2022-02-25 10:38:19

开源3D建模免费

2024-02-19 07:10:00

视觉模型

2013-04-09 14:27:29

3D打印机

2013-01-22 11:29:01

3D打印

2023-04-24 16:25:47

3D开发

2011-10-06 13:30:45

宏碁投影仪

2012-11-26 12:51:44

木材3D打

2011-07-28 09:28:37

2010-02-02 16:30:46

Fedora 10

2011-05-26 10:05:07

优派投影机

2021-11-12 07:36:05

Windows 11操作系统微软

2022-02-10 20:50:56

腾讯QQAI

2011-08-26 14:50:23

2011-04-26 14:21:20

3DJVC投影机

2011-05-25 16:07:17

2023-08-21 20:21:52

软件ZBrush行业

2012-08-13 17:11:37

Silverlight

2023-03-03 21:42:18

鸿蒙
点赞
收藏

51CTO技术栈公众号