疫情的大流行让世界陷入困扰的同时,也催生出了更多机遇。对于强调娱乐表现性及实时互动性的电子竞技来说,它大大推动了演播行业XR技术的落地和应用。
作为全球最成功的多人动作战略游戏,《英雄联盟》催生出了狂热的电竞社区,并拥有全球范围内的地区联赛。
英雄联盟职业联赛,简称LPL(League of Legends Pro League)
在2018年总决赛,K/DA 虚拟K-pop女团正式登场,由英雄联盟中的人气女性角色组成,拥有崭新且大胆创新的皮肤及团队单曲《Pop /Stars》。在总决赛现场,利用AR技术重新演绎了这首开场曲。整场直播共吸引了2.05亿观众。
总决赛上登场的虚拟偶像团队K/DA
K/DA 的人气越来越旺,对AR技术的要求也越来越高。2019年9月,在中国的英雄联盟职业联赛中,拳头公司还联合了Cubic Motion公司(主要负责面部捕捉)和The Future Group公司(提供虚拟制作系统Pixotope)、Animatrik工作室(负责身体捕捉)的最新动作捕捉及虚拟演播技术,将K/DA 的人气王阿卡丽(Akalil)带进了真实的上海梅赛德斯-奔驰文化中心直播现场。在渲染层面,运用了Nvidia的RTX 图形卡,采用了虚幻引擎及光线追踪下的表现效果。
阿卡丽在联盟决赛上接受主持人的采访
在这次的演示上,数字角色的实时采访及表演被证明是完全可行且稳定的,对话十分流畅,角色的荧光舞蹈表演到最后烟雾消失一气呵成,这要归功于Cubic Motion的计算机视觉科学专家团队的努力。幕后团队对阿卡丽的模型进行了更细致的绑定,这也是最关键且最困难的一环。
阿卡丽在现场点亮霓虹灯开始表演
随着数字人、虚拟人技术的越发成熟,人们对于将虚拟人物及环境带入现实有了更高的期待。这种狂热也诞生出了非常多难以置信的表现呈现方式。
2020年10月在,上海的全球英雄联盟决赛现场,除了开幕式上固定的K/DA 女团AR表演,还革命性地使用了最新的XR技术。
利用LED空间打造的虚拟对战台
Lux Machina是一家专门从事虚拟制作的技术咨询公司,通过提供LED屏幕和基础设施来推动实时视觉特效的应用,比如包括奥斯卡和艾美奖在内的颁奖典礼现场直播,还包括电影中的LED虚拟制作,比如《曼达洛人》。
图片来源:Riot Games
利用LED进行的真人实时互动表演
疫情的爆发催生了在线直播及虚拟制作的发展。本次英雄联盟总决赛XR技术由虚拟制作技术咨询公司Lux Machina 领头,融合了物理世界和虚拟世界。
在鸟巢表演中穿插的远古巨龙AR演艺
在2017-2019年,拳头公司(Riot Games)曾在北京鸟巢运用AR技术实现了远古龙的直播现场降临演绎,而这次,他们想尝试世界上最复杂的混合现实舞台(首次XR的大型多机位直播)。
为直播打造的超强网络环境及硬件系统
摇臂和其他摄影机也整合到了XR系统中
XR团队由40多名技术人员和艺术家组成,由POSSIBLE Priductions公司担任美术指导和直播合作方。在集群渲染系统上使用了Lux Machina的开发技术,以32K分辨率、60帧每秒的速率,为LED提供高保真的渲染画面效果。
利用XR的虚拟环境拓展技术,LED舞台不再局限于已搭建的范围,而在周围360度无缝衔接上了虚拟城市,从分类上,这种拓展技术更接近于AR范畴。
经过虚拟拓展和经过虚拟拓展的对比
所有主要的机位都安装了追踪系统
在直播的Ban&Pick(挑选英雄环节)中的很多实时特效的实现上,Lux Machina开发了大量源代码,在修改后的虚幻引擎间传送游戏数据,某些时刻会自动触发舞台的特效,动态地在场地上呈现游戏中的状况。非绿幕的环境也让在其中对战的战队参赛者感到熟悉和放松,并实时观看到直播内容,减少了环境的陌生感。
在Ban&Pick环节的LED互动特效
在直播的镜头调度上,XR舞台支持两个机位的实时切换和访问,其中一个摄影机投射范围较小,用于中近景的拍摄。此外,由于比赛的实况转播性,实时的XR舞台支持LIVE的互动,周边环境和AR效果可以随着赛事的进行而调整和变换。
可满足两个视角的摄影机LED投射
拳头公司希望通过XR技术让观众感受到更多不同举办地的城市文化,在现实和虚拟的城市中穿越,感受到变化。
远景的虚拟上海城市与近处的召唤师峡谷
虽然Lux Machina为了这个项目做了几个月的开创性工具开发工作,但在技术实现上仍有瑕疵,在XR舞台的AR环境扩展上还稍显不足,特别是现实LED与拓展虚拟画面间的接缝十分明显,并且用了比较笨的方式(围绕顶面的白框)遮挡掉竖直向的接缝。目前,XR的接缝处理通过Disguise等相关媒体投射服务器能达到更好的同步效果,并通过增加羽化融合值来获得完美的过渡。
2020上海浦东足球体育场举办的决赛开幕式AR表演
据悉,2021年的英雄联盟全球总决赛将继续落户中国,今年拳头公司在赛事演艺及虚拟技术上的突破可以拭目以待。
经公众号“电影设计师”(ID:set-arch-designer)授权转载。原文及标题略有改动。
图片来源于网络,版权归原作者所有。