Ben Kee是新加坡Anomalyst Studio的创始人、创意总监兼执行制片，他的团队在2021全球电子竞技大赛（Global Esports Games）开幕式上为歌手ShiGGa Shay制作了混合现实现场表演。混合现实表演是将虚拟制作和传统实时制作融合在一起的一种表演形式，可通过Xsens提供的动作捕捉技术来实现。Kee解释了人们为何对虚拟演唱会有着越来越多的要求，它不仅仅是将表演虚拟化，其本身就是一种独特的体验。
游戏引擎如何促进虚拟制作
“Anomalyst是一家多媒体公司，主要为现场活动制作内容。在过去的两年中，由于新冠肺炎疫情使得众多现场活动被迫取消。”为了解决这个问题，Anomalyst Studio不得不改变重心。“我们不得不以一种奇怪的方式转向虚拟制作。我们从绿屏解决方案、虚拟背景开始，并尝试使用虚幻引擎和其他游戏引擎来制作内容。”
当Anomalyst Studio决定将重心转移到虚拟活动制作时，动作捕捉技术已经在他们的流程中。“我们的合作伙伴和朋友都是表演者和音乐家，他们一直希望能对自己的表演进行直播，即使在疫情期也能进行工作，”Kee说道。“对虚拟制作的需求使我们产生了一个想法：使用游戏引擎、表演者和动作捕捉来改进直播表演的方式。”在全球电竞大赛上制作ShiGGa Shay的混合现实表演时，工作室必须认真思考如何将虚拟与现实的表演结合在一起，在开幕式上进行这样一种新型表演意味着巨大的挑战。。
作为先驱者所面临的挑战
作为第一个在现场制作混合现实表演的工作室，这本身就是一项壮举，而更惊人的是在电子竞技这样一个快速发展的领域中做到首次尝试。2021年，全球电子竞技观众达到4.74亿人，预计在2024年达到5.77亿人，与此同时Anomalyst也在向众多观众制作表演，而作为先驱者势必会面临着一系列的挑战。
“根据需求制定计划这非常困难，但幸运的是客户给了我们创作的自由。”从虚拟内容的时间安排和设置到实际的现场布置问题，Anomalyst Studio接受了这些挑战：“虚拟制作的表演对于我们和客户来说都是一个全新的创作”，Kee解释道。“我们在这次全球电竞大赛上的现场布置时间非常紧张，大赛开幕前三天我们才得以进入活动场地。在实地考察活动场地之前我们无法提前制作节目的内容。我们必须在现场对表演进行彩排和测试，以确保它与开幕式其他内容和客户的要求相吻合。”
Kee和他的团队在面临现场布置的挑战同时，也被来自于自己的高期望和创造力所启发：“Anomalyst的目标是确保我们最终呈现的节目内容能超出预期。” 例如，Kee希望能够拥有一些虚拟内容为表演增添气氛和动作，因此他“请了一位舞者同事预先录制了一些舞蹈动作，作为在现场的附加内容。在这过程中，我们凭着直觉和所拥有的工具，摸索出我们能够做什么来与舞者一同共度难关。” 虽然Anomalyst的现场布置工作面临挑战，但团队选择了可靠性高的Xsens动捕套装，并在其帮助下将混合现实表演变成现实。
Xsens在实现虚拟世界实时运动中的作用
Anomalyst团队的创意方向以及他们在活动策划和执行方面的经验使该项目变得可行，但Kee强调，团队所选择的技术对于实现他们设想的动作很重要。Movella的使命是为运动赋予意义，这与Kee的团队想要传达的理念一致；该技术用于捕捉舞者流畅的舞蹈动作，并将其数字化。“Xsens以一种让动作充满活力的方式来进行动作捕捉。”
“Xsens动捕套装的一个特点是能让表演者在落地后随即再次起跳，不会有角色陷入地面等穿模的现象发生”，Kee解释道。“由于漂移的现象非常少，因此动捕服可以传达每个动作的力量和敏捷性。在测试了其他动捕套装之后，我们需要一套容易设置使用的套装，因为我们需要在活动现场实地进行虚拟制作。我认为Xsens是一款出色的动作捕捉解决方案，它更像是一种由内到外的跟踪，而不是像其他套装那样由外向内地跟踪。 ”
Xsens套装是将混合现实表演的能量传递给全球电竞大赛观众的关键，在开幕式上的这场表演以其独特的形式和吸引观众的能力而备受关注。对于Anomalyst而言，围绕该表演所引起的关注已经证实了混合现实演出的魅力。
通过虚拟制作进行叙事的艺术
“我相信混合现实可以成为一种叙事的表达方式，我认为很多传统的节目导演和电影制作人现在正在研究这一点。”Kee说道。直播活动的数字化前途是光明的，但第一个成功的案例将成为保持和激发行业兴趣的关键：“我们吸引了新加坡国家广播公司的注意，他们对参观了解工作室如何制作混合现实表演非常感兴趣。人们对这些技术感到兴奋，只是他们还不知道已经完成了什么，”Kee 解释道。
