Hiverlab如何使用动作捕捉技术来帮助人们理焦虑症群体

内容类型:

Hiverlab总部位于新加坡,是一家沉浸式技术公司,专注于创建增强现实、虚拟现实和混合现实体验。该工作室利用这些虚拟技术令人难以置信的创作自由度,为众多行业制作娱乐和教育内容。最近,Hiverlab为新加坡慈善机构TOUCH Community Services(触爱社会服务)设计并制作了一部名为VR Stories的360度沉浸式动画——该动画旨在帮助公众亲身体验严重焦虑症患者的日常生活。

为了创造动画角色体验,Hiverlab使用Xsens MVN Animate来捕捉演员的全身动作并驱动每个动画角色的复杂细节。我们与Hiverlab的创意团队负责人Christopher William进行了交谈,了解工作室是如何构建VR故事以及Xsens的动捕数据如何帮助制作逼真的动画效果。

通过VR提高公众意识度

心理健康已成为日益突出的社会性问题,越来越多的社会活动正在帮助因心理健康而遭受歧视与误解的人群,并寻求新的方式来为他们提供帮助。当人们在探讨心理健康时,个体之间会难以理解他人的感知和感受。触爱社会服务希望创造一种能够打破这一障碍的方法,将个人置于一个身临其境的交互式虚拟世界中。

借助Hiverlab的创造力,这个想法变成了现实。让触爱的工作者能够以课堂的形式进行多人指导,通过虚拟世界来引导参与者认识到年轻人心理健康问题。最终动画内容为时长14分钟的视频,包含两个主要角色和四个次要角色。Hiverlab通过使用Xsens MVN Animate的运动数据在Unity中的为所有六个角色制作动画。

“我们用了三个月的时间来完成这部360度动画电影,包括所有角色的动画和环境设计。我们希望每个角色的动画效果流畅逼真而不匆忙,于是Xsens成为理想的选择。Xsens提供现成的技术——我基本上可以即插即用,无需担心任何动画清稿,”克里斯托弗说道。

在办公室内进行动作捕捉

与众多初创公司一样,Hiverlab工作室没有好莱坞制作般的大场地,只能利用周边可用空间来完成动作捕捉——例如走廊、室外游乐区和共享办公室。Hiverlab的团队使用Xsens的便携式记录功能将人物角色Jane的虚拟客厅映射到她周围的环境中,让演员可以在该区域内自由行动。Xsens动捕套装可在在任何环境中工作,无需光学相机设置,这非常符合Hiverlab的要求。通过使用精确的无线运动传感器,演员能够在任何场地中自由移动。

“我们使用办公室中的基本布局来映射影片所需的虚拟环境。我们利用了整个建筑,包括走廊和洗手间,在绘制所有这些点后,我可以进出不同的空间,动画将与虚拟环境完全对应,并立即构建动画场景,”Christopher解释说。

Hiverlab使用了完整的MVN Animate软件,获取实时动捕数据并无线传输到连接WiFi的笔记本电脑上。通过实时获取动捕数据,Christopher可以在虚拟空间中查看自己与导演身处的位置,实时查看虚拟环境。这可以通过虚拟相机和Xsens来实现,将360度动画数据直接流式传输和渲染到Unity引擎中。这提高了动画的效率和质量,让Christopher成功地在三个月的期限内完成任务。

改变观念

该项目在2019年新加坡心理健康会议上首次现场展示,并获得了观众们的积极反馈。会议配备了多副耳机,允许多人同时进入虚拟世界并体验动画。这个故事是互动性的,观众做出的决定可能会产生八个不同的结局,所有结局的核心都是在心理健康和解决方案上。

观众可以直接地体验焦虑症人群的日常生活。动画中通过灯光和声音来描绘这些场景,当父母在争吵时,会模糊视觉和抑制其他感官来体现主角内心的感受。VR Stories项目体现了沉浸式故事讲述在VR中的有效性,并且通过使用Xsens动作捕捉直接驱动逼真的动画,大大提高了故事的真实性。

Christopher现在将Xsens视为Hiverlab工作流程中的核心部分,并且正在寻求使用Xsens精确的动作捕捉技术来创造更逼真的数字人体验,利用Xsens MotionCloud的其他优势来获得额外的处理能力。创新是Hiverlab的核心使命,我们很期待看到工作室在未来如何运用Xsens的动作捕捉技术。