博文来自奥飞寺
量子比特 | 公众号QbitAI
最近看3d的软件,通过在Maya中添加换脸软件即可实现的实时面部捕捉在日本开始流行:
无论你如何眨眼或眨眼,你的褶皱和肌肉的微妙变化都能跟上。
连续两个演示视频的点赞量分别超过4k和3k,甚至被网友评论为“效果太好了,有点吓人”。
怎么说呢……直接把脸放在镜头前,实时改变面部表情,确实更方便。
至少相比满脸圆点+机械装置,福利不再那么可怕了……
开发者Hirokazu Yokohara是日本一位“全能”艺术家,可以做3D建模、场景、特效,甚至像这样涉及尖端技术的工作。
比如我们之前介绍的电车上叽叽喳喳的可爱女孩,也是这位大师创作的:
接下来我们就从他这次使用的技术说起。
再次查看 DeepFake
横山提到,前几天看到有人结合UE5和DeepFace Live直接合成了一个视频:
于是他也开始思考,打算和玛雅一起尝试一下。 并且他还实现了实时面部捕捉的效果。
具体来说,技术方案是Maya+换脸软件DeepFace Live。
其中,Maya有自己的面部绑定系统。
从名字就可以看出,DeepFace Live 与曾经流行的 DeepFake 有关。
这是一种深度视频换脸技术看3d的软件,利用了机器学习中的深度学习。 基于这项技术,诞生了无数可以下载甚至在线播放的工具和软件。
(肌肉金轮就是其成果之一)
DeepFace Live 就是其中之一。
这是去年刚刚发布的开源工具。 它的特点是在流媒体或直播视频期间实时换脸,这意味着它允许用户通过网络摄像头应用面部滤镜。 它与大多数基于视频的流媒体和消息服务结合使用。 。
例如可以在常见的Skype、Zoom、Tik Tok、Twitch上使用:
当然,DeepFaceLive的换脸功能也可以应用于预先录制的视频。
开发商是来自俄罗斯的Iperov。 同时,他也是目前应用最广泛的DeepFaceLab的开发者之一。
开发商也是个屌丝。
至于横原大师本人,正如我们一开始所介绍的那样,他是一位在各个领域都有深厚造诣的多面手。
来自东京卡其工作室,主要负责CM、MV、动画、大型游戏等各种媒体或设备的视觉特效(VFX)设计。
不要提工作室的名字,光是他们的作品,总有一款是你熟悉的。
比如2017年《阴阳师》的这个宣传PV:
2020年VR游戏设备hexaRide首款合作游戏《攻壳机动队》CG:
他还为世界第一公主制作了MV:
怎么说呢,第二个鸡鸡被刺伤了。
参考链接:
[1]
[2]
- 超过-
量子位QbitAI·今日头条签约
关注我们,第一时间了解前沿技术动态