江苏跨年演唱会AR技术的应用

江苏2017跨年演唱会取得了巨大的成功,从前几天满屏的网络报道和朋友圈的赞叹数量就可以看出。炫酷的灯光、舞美,时下最热门的AR技术应用,原来,我们也可以为媒体界创造传说。

此次江苏跨年幕后的技术团队有“CCS乐田”与“Vizrt China”,所用的软件产品包含Viz Virtual Studio

 

百度和知乎上有好奇者问道:江苏跨年演唱会舞台3D鲸鱼是怎样实现的?应答者数量近乎为零,想必众多网友对此次晚会的AR技术应用并不了解。谈到AR技术,首先我们来重述其概念。

AR即Augmented Reality(增强现实)

AR技术是计算机在现实影像上叠加相应的图像技术,利用虚拟世界套入现实世界并与之进行互动,达到“增强”现实的目的。

与VR有所差异:

VR即 Virtual Reality(虚拟现实)

VR技术是在计算机上生成一个三维空间,并利用这个空间提供给使用者关于视觉、听觉、触觉等感官的虚拟,让使用者仿佛身临其境一般。

此次江苏跨年演唱会我们真正做到了AR-增强现实,主要的突破点是增强了“现实”而不是说增添了“虚拟”。从这个角度上讲,我们这次做到了真正意义上的AR。

 

不能说这次哪个技术最高端,可以说每个环节都是最高端的。制作过程与环节,都采用了电影的制作技术与流程。策划、测试、前期、后期、建模、拍摄、前期跟踪、后期跟踪、实时跟踪、渲染调色、合成、舞美搭建……至少有数30个以上的实施环节,只有做到无一疏漏,才能圆满完成。所以我们把它定义为:实时的电影拍摄。是目前最高级别的AR技术呈现。

当然,我们也在探索和研发,目前画面质量上与真正的电影还有一定距离,但这一定是电影级AR的开始,也是一个新标杆,从今天开始,我们希望重新定义AR与虚拟的概念,但我们会与电影级视觉感受越拉越近。

 

除此之外,我们对演员也是有要求的,这个环节我们就是导演,与拍电影时导演对演员的要求是一样的。这次典型的就是林俊杰,他要感觉自己有骑到大象,坐到王座,有能量升空,然后落地的概念。光这一环节我们从策划到真实演员的拍摄累计用了三天的时间,还不包括拍摄后的处理。

 

日本在里约奥运会闭幕式上堪称用了世界领先技术,在我们看来,中国是完全可以做到的,只是缺少合适的机会,这次的舞台非常合适。最终用时两个月,4台摄像机,同时还制作了其他5个场景,比起日本耗时3个月,使用40多台摄像机有了大大的提升。

值得一提的是,我们做的其的升级版。除了平行环绕,我们还潜入了舞台地下(3D鲸鱼),配有音乐节奏的合成,就连摄像机的飞行轨迹都像是在跳舞。不说出来很难观众可能很难理解到。但我们做到了日本人的超级升级版,而且资源才使用了他们的几十分之一。