爱奇艺打造了一座“虚实之城”，将XR与互动玩出了新高度！

THE9“虚实之城”沉浸式虚拟演唱会

2021年3月26日-27日

爱奇艺直播

THE9“虚实之城”沉浸式虚拟演唱会

THE9“虚实之城”沉浸式虚拟演唱会并非传统形式的打造一个或多个虚拟场景，而是以THE9成团一路以来的成长故事作为核心概念，通过XR技术为九位女孩量身“定做”了一座属于她们的“虚实之城”。城市中的每栋主要建筑都被设计成风格迥然的舞台用于不同时间段的表演。

演唱会过程中，粉丝会跟随艺人在城市的不同建筑、不同空间中穿梭，领略这座虚拟之城独特的风光。

 全球首个影视级LED写实化虚拟制作XR直播 

若想打造一场与国外相媲美或者超越国外的XR演唱会，作为基石的场地尤为重要。爱奇艺为此次演唱会特意搭建了一个虚拟制作基地。

这个基地从2020年底开始建造，所有基建和设备都是按照影视级标准来搭建，甚至于超出标准。如LED屏幕的选择，往往一些表演，因为屏幕像素不够，视觉效果会出现“露馅”或马赛克现象，无法给观众舒适的观赏体验，大打折扣了演出质量。而爱奇艺在屏幕选择方面摒弃了传统演唱会常用的屏幕，采用影视级LED作为视觉载体。

实拍舞台VS XR渲染效果

现场除XR的屏幕之外，还增加了互动大屏和返送屏。互动大屏会用于与观众进行互动，返送大屏则是给表演者所见即所得的观看效果，让表演者通过屏幕能够看到自己目前的表演效果，这样能够更好的让表演者与视觉画面相互配合。这个虚拟制作基地会一直保留，用于其他活动方面。

 演唱会设计、制作 

此次的舞台设计可以说是THE9团员们的内心投射，导演组为此次演唱会设计了一条主线，以九个女孩的成长历程为线索，讲述自我突破的故事，也反映了他们成团以来发展的每个阶段和与成长变化。虚拟制作技术让这些梦想变成现实，在这个虚拟世界中拥有属于自己的专属领地和舞台。

开场

《Dumb Dumb Bomb》的舞台

这首歌的舞台位于“虚实之城”最高建筑中，一部持续攀登的电梯，正如蓬勃发展的她们，不断上升，不断成长。

《斯芬克斯》的舞台

《斯芬克斯》歌曲舞台以歌曲本意为蓝本创造而成，舞台犹如歌曲的放大镜般充满了埃及神话元素，硕大的狮身人面像成为舞台主元素，独属于女孩们的X元素也被应用到舞台之上。

《斯芬克斯》是一首影视化XR的曲目，真实的场景设计，呈现身临其境的效果。

《猎》的舞台

《猎》的舞台介于现实与虚幻之间，为热带雨林风格舞台。危机四伏的丛林充满了诸多未知事物，9个女孩会站在车顶上，车子带她们穿梭森林。这对于女孩们来说即是惊喜也是挑战，作为“猎手”的她们要携手去面对这些挑战与惊喜。

《Not Me》的舞台

基于立柱体设计，内部为一个个方格子，无数嘴唇出现在方格内，如同网络上各种声音般，一直围绕着她们。女孩们必须时刻保持清醒，坚持自我，保持独立。

《Lion》的舞台

除团队表演外，属于个人的solo曲目舞台也非常抢眼，展现出每个成员的独特风采。

虞书欣《Gwalla》

谢可寅《Comet》

刘雨昕 《BiuBiu》 

安崎 《Yea》

陆柯燃《K’》

许佳琪 《Skin》

 喻言 《蔷薇之巅》

赵小棠 《TANG》

孔雪儿 《Call me by my name》

THE9“虚实之城”沉浸式虚拟演唱会，从创作之初到最终呈现会面临许多技术难点，都要爱奇艺去一一攻克！前面我们提到的LED是一点，而最大的难点莫过于软件方面。

一般我们看到的线下演唱会屏幕上所播放的素材都是同一平面风格化视频。即使是利用各种视觉错觉所呈现的画面也只是固定性的视觉场景，而XR演唱会需要构建一个三维场景，且场景要符合空间逻辑与透视原理。在这其中摄像机充当了眼睛的角色，当摄像机移动时软件要立刻计算出摄像机所“看”的位置在哪里，所有屏幕的画面要呈现出“看”到位置的画面，一切必须真实，自然才能让观众觉得这个画面合情合理。

虚拟内容设计师调整场景

在这个过程中GPU 3D引擎要不断的算出当前摄像机的位置发生偏移以后新的位置和大小，这些都是基于虚拟拍摄的一套复杂的软件系统，和一套很强的算法制作而成，如果是录制，遇到问题可以重新录制，而直播却没有重来的机会，这需要软件必须非常强大，能够零失误。

XR技术所用的摄像机和摇臂与常规摇臂也有所不同，所有设备都是为此项技术定制，另外XR所展示的场景画面需要软件去计算反馈来实现画面效果，这要求操控机器的摄像师有一定的经验或者受过训练，一旦出现摇臂抖动过快这种状况，会导致计算力跟不上，画面出现问题。爱奇艺制作组和各方技术人员进行了多次预演来解决这一问题，在合理的镜头下来完成场景的切换角度。

 多项创新互动玩法 

此次虚拟演唱会的制作不止于视觉享受，爱奇艺基于XR技术开发了多种创新的互动技术都在这场演唱会中集中呈现。

专属虚拟分身

三百人线上大屏幕连麦

AR弹幕环绕式立体呈现

10个机位自由选择

等.......

实现跨次元应援等多重享受多方位满足NINECHO需求！

专属分身

部分购票观众会获得一个直播间虚拟分身“桃乐豆”，拥有自己的试衣间，能够“盛装打扮”自己的虚拟形象代替自己现身直播间现场，感受真正的身临其境！

三百人线上大屏幕连麦

在虚拟演唱会过程中，虚拟制作基地的互动屏幕上会出现300余位观众的身影，通过大屏实现与艺人之间的即时互动。而这300余位观众当中，将有六名“幸运儿”被抽中和艺人进行面对面的谈话。

300余人大屏连线

夸夸榜应援特效

AR弹幕环绕式立体呈现

弹幕文化的出现让很多人能够在观看时进行探讨、交流、吐槽、情绪表达等等，弹幕已经成为一种轻互动行为，而本次虚幻演唱会的弹幕有些奇特，并非简单的屏幕显示各种弹幕，而是与舞台、表演想结合，以环绕立体式的方式呈现出来，既新鲜又有趣。不少观众一定是希望自己发的弹幕能够成为表演的一部分，这也增加了观众与爱豆的互动感和期待感。

10个机位自由选择

多机位自由选择的形式在爱奇艺多项演出当中都有用到，而这次种类更为丰富又XR机位、单人直拍机位、常规的拍摄的机位，能够任意视角切换来观看艺人的表演。

读到这里，会有许多小伙伴有所疑问——何为“XR”？

XR即扩展现实是一个概括性术语，囊括了增强现实（AR），虚拟现实（VR），混合现实（MR）以及介于两者之间的所有内容。也有人将XR称为未来交互的终极形态!

随着技术的越发成熟，也让越来越多的电影拍摄、演唱会、发布会、等活动，开始运用高科技感以及逼真感的XR技术，开辟出许多新玩法。

最早在影视行业出圈的作品非《曼达洛人》莫属，它是首个选用XR技术+LED屏幕来完成制作的影视作品,而非传统式的绿幕拍摄手法。

制作组搭建了一个LED+现实拍摄的场地，其中LED会呈现虚拟场景，而虚拟的场景在XR技术下会按照追踪摄影机的运动轨迹进行移动变化。

超高清的屏幕能够呈现以假乱真的场景，而相比传统绿幕所遇到的投射光线、反光等灯光问题也能够完美解决。

即见即修改的方式，也是前所未有的。这让导演和演员能够第一时间知道场景或剧情存在怎样的问题，立即进行修改和再创作。

可以说是《曼达洛人》让XR技术开始走进大众视野，也让我们看到了XR的未来！

而在2020年5月凯蒂·佩里在美国偶像大结局中的表演，让我们首次看到了XR技术别应用到表演方面。

从表演开始，凯蒂·佩里便带我们进入了一个全新的世界，无界的视觉，天马行空的视觉概念在这里展现的淋漓尽致。

这场表演让我们意识到，我们已经进入了一个属于虚拟的新时代。

再到后来，比莉·艾利什用此项技术举办了自己首个虚拟演唱会直播——“我们要去哪里？”。这是迄今为止见过的最棒的国外XR虚拟演唱会，近乎沉浸式的音乐会体验，让观众沉迷其中，忘却现实。

奇幻、诡异的视觉设计成为了演唱会最大亮点。越发成熟的XR技术，让表演的视觉开始大胆起来。

而在国内，THE9“虚实之城”沉浸式虚拟演唱会让我们看到了能够与国外媲美的XR演唱会，无论是软硬件方面还是视觉概念的制作，都毫不逊色。更为出众的视觉效果与互动玩法远超国外。

可以说THE9“虚实之城”沉浸式虚拟演唱会的出现，重新定义了国内线上演唱会的玩法，将许多不可能变为可能，互动形式也是国内外前所未有的，整体制作水平也不输于任何国外XR演唱会，达到比肩全球的新高度。

THE9“虚实之城”沉浸式虚拟演唱会的成功，这让我们更为期待爱奇艺下一个XR作品！

来源｜影像骑士