实时面部捕捉在日推火了，这是怎么做到的？
博文来自奥飞寺
量子比特 | 公众号QbitAI
最近看3d的软件，通过在Maya中添加换脸软件即可实现的实时面部捕捉在日本开始流行：
无论你如何眨眼或眨眼，你的褶皱和肌肉的微妙变化都能跟上。
连续两个演示视频的点赞量分别超过4k和3k，甚至被网友评论为“效果太好了，有点吓人”。
怎么说呢……直接把脸放在镜头前，实时改变面部表情，确实更方便。
至少相比满脸圆点+机械装置，福利不再那么可怕了……
开发者Hirokazu Yokohara是日本一位“全能”艺术家，可以做3D建模、场景、特效，甚至像这样涉及尖端技术的工作。
比如我们之前介绍的电车上叽叽喳喳的可爱女孩，也是这位大师创作的：
接下来我们就从他这次使用的技术说起。
再次查看 DeepFake
横山提到，前几天看到有人结合UE5和DeepFace Live直接合成了一个视频：
于是他也开始思考，打算和玛雅一起尝试一下。 并且他还实现了实时面部捕捉的效果。
具体来说，技术方案是Maya+换脸软件DeepFace Live。
其中，Maya有自己的面部绑定系统。
从名字就可以看出，DeepFace Live 与曾经流行的 DeepFake 有关。
这是一种深度视频换脸技术看3d的软件，利用了机器学习中的深度学习。 基于这项技术，诞生了无数可以下载甚至在线播放的工具和软件。
（肌肉金轮就是其成果之一）
DeepFace Live 就是其中之一。
这是去年刚刚发布的开源工具。 它的特点是在流媒体或直播视频期间实时换脸，这意味着它允许用户通过网络摄像头应用面部滤镜。 它与大多数基于视频的流媒体和消息服务结合使用。 。
例如可以在常见的Skype、Zoom、Tik Tok、Twitch上使用：
当然，DeepFaceLive的换脸功能也可以应用于预先录制的视频。
开发商是来自俄罗斯的Iperov。 同时，他也是目前应用最广泛的DeepFaceLab的开发者之一。
开发商也是个屌丝。
至于横原大师本人，正如我们一开始所介绍的那样，他是一位在各个领域都有深厚造诣的多面手。
来自东京卡其工作室，主要负责CM、MV、动画、大型游戏等各种媒体或设备的视觉特效（VFX）设计。
不要提工作室的名字，光是他们的作品，总有一款是你熟悉的。
比如2017年《阴阳师》的这个宣传PV：
2020年VR游戏设备hexaRide首款合作游戏《攻壳机动队》CG：
他还为世界第一公主制作了MV：
怎么说呢，第二个鸡鸡被刺伤了。
参考链接：
[1]
[2]
- 超过-
量子位QbitAI·今日头条签约
关注我们，第一时间了解前沿技术动态
下一篇： 最近火爆全网的AI绘画你玩过了吗？