搜维尔

 找回密码
 立即注册
查看: 34|回复: 0

面部动作捕捉系统应用方案

[复制链接]
发表于 2022-10-21 15:25:27 | 显示全部楼层 |阅读模式

有任何问题可电话咨询:15011062927

您需要 登录 才可以下载或查看,没有账号?立即注册

x

当夫妻团队所罗门和Nerissa Jagwe组建艺术,动画和数字制作公司Sowl Studios时,他们的使命是通过利用丰富多样的非洲遗产,为他们的两个孩子,其他孩子和后代创造内容学习机会 - 并且几乎所有人都在自己的家中完成。

结果是Sowwl的“恩科扎和南基亚历险记”,这是一个动画系列,讲述了目前可以通过YouTube频道和相关应用程序看到的两个角色。地理、计数和语言(如卢干达)以及其他重要的文化方面是应用程序和视频的核心组成部分。

令人难以置信的是,角色的面部动画都是使用一系列可访问的工具,仅使用有限的资源制作的。这包括使用Faceware的硬件和软件实现的面部动作捕捉,这些硬件和软件由Faceware Mark IV头盔安装摄像头(HMC)以及Xsens运动捕捉服和其他工具组成。

                               
登录/注册后可看大图

寻找面罩
在深入研究3D角色动画之前,所罗门和Nerissa已经在开发一个非洲语言应用程序,父母可以使用它来帮助孩子们更多地了解他们的文化,但他们想更进一步。这就是3D角色恩科扎和南基亚的用武之地。

“我们开始扩展我们的语言应用程序,以帮助父母使用包含引人入胜内容的教育工具,”所罗门说,他补充说,动画主要是在他们的“客厅”完成的。

事实上,为了制作应用程序和YouTube频道的内容,他们需要快速有效的方法来完成面部动作捕捉。这部作品背后的小团队以三大洲为基础,其中一位主要配音演员位于英国(所罗门和内丽莎在弗吉尼亚州)。

当Faceware Studio发布时,我们看到支持使用视频的功能,我们非常高兴尝试一下。它给了我们信心,我们可以通过Faceware Studio处理它们,以驱动我们角色的面部动画。

钥匙套件:面罩马克 IV HMC
作为他为Nkoza和Nankya探索面部动画的一部分,所罗门说他也“一直在寻求找到一种头戴式相机系统,该系统耐用且足够轻便,可以捕捉面部性能。他甚至制作了自己的“自制系统来帮助捕捉我自己的表演,但它太重了,我当然不能信任它来与其他配音演员一起使用。

然后,面容给他寄来了马克四世系统。“我兴奋地在云9上。头盔非常舒适,重量轻。它提供了一种无线解决方案,可以在进行表演时更轻松地四处走动,而无需连接到计算机。

                               
登录/注册后可看大图

然后是马克IV HMC上重构的LED照明系统。所罗门表示,他之前曾在自制的头戴式摄像机系统上尝试过各种照明选项,但面对过度照明导致视频过度夸大而苦苦挣扎。

“我使用马克四世系统记录了自己表演一首诗的片段,以及《恩科扎和南基亚历险记》中的故事,”所罗门补充道。“我们的儿童演员有一些场景需要我添加一些额外的动画,所以我加载了音频并进行了口型同步,以匹配我儿子和女儿的声音。我能够使用来自Mark IV系统的视频,在Faceware Studio内部作为视频输入,并使用专业的头戴式摄像头作为面部跟踪模型,并将其流式传输到Reallusion iClone中。

所罗门发现Mark IV系统在可穿戴方面的灵活性和照明方面效果很好。例如,有三种头盔尺寸可供选择,每种尺寸都有额外的泡沫衬垫,用于内部,以实现舒适的贴合。

“这是一个非常周到的选择,因为我有两个孩子为我们的Nkoza和Nankya角色配音,”所罗门说。“所以,如果你有儿童演员在你的电影或儿童系列中扮演孩子们的角色,他们可以选择戴上其中一个头盔来捕捉他们的面部表演。此外,Mark IV系统的便携性非常棒,将可充电电池放在皮带安全带上,使得在使用Xsens套装进行运动捕捉会话时可以更轻松地长时间工作。

Mark IV HMC还具有一组新设计的就地点击杆支架,摄像机可以坐在这些支架上。所罗门按照图示手册的分步说明设置头盔。“新设计使得为新会议和后续会议调整摄像机的角度变得更加容易。相机在可调节的杆上设置在恰到好处的距离,这消除了您在使用头戴式摄像头拍摄的视频中经常看到的鱼眼镜头外观。

将 Xsen 添加到混音中
为了完成捕获过程,所罗门一直在使用Xsens Link套装进行身体捕获。“我过去曾使用过其他惯性解决方案,但我完全被Xsens Link套装数据的准确性所震撼。为我节省了很多清理时间。此外,Xsens 和 Mark IV HMC 的面部捕获的轻松集成意味着捕获可以完全无线进行。“这两个系统的无缝协同工作,”所罗门详细介绍道,“是由Faceware的牧羊人软件实现的,该软件通过KiPro机架录制来自Mark IV系统摄像头的视频,与Xsens MVN动画专业软件同步。

                               
登录/注册后可看大图
原文为英文,中文内容为软件翻译,表述不准确支持敬请谅解

回复

使用道具 举报

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表