粉丝和AR弹幕升到半空，被重新定义的不只是娱乐
作者 | 肖漫
本周六，看完了 THE9 “虚实之城”沉浸式虚拟演唱会，本人的表情是这样的：
好家伙！原本奔着漂亮小姐姐看的演唱会，最后眼光全放在了震撼的舞台效果上，一会儿是狮身人面像，一会儿置身在真实城市空间里，一会儿又切换到森林之中，舞台场景电影感十足。
尤其在《Promise》舞台，当粉丝视频和 AR 弹幕一起升到舞台半空，与 THE9 表演融为一体时，仿佛看到了未来娱乐的样子。
粉丝在舞台交替“上映”，成为舞台不可或缺的一部分，同时，AR 弹幕实时传递着粉丝的爱意。对于这样一个相互交融的舞台，粉丝们纷纷惊呼实现了“爱意的双向奔赴”！
这是真实的线上演唱会吗？
本着勤（wo）奋（zhuang）好（de）学的心，我深入地了解了 9 位小姐姐这场酷炫的演唱会背后到底有什么玄机。
才发现，在新兴技术的加持下，内容形态居然能释放出如此不可思议的可能性！
1
像拍电影一样“做演出”
其实近年来，在内容和技术的融合方面，业内已经不止一次尝试。
比如说在 2016 年初的格莱美颁奖典礼上，借助英特尔的 RealSense 实感技术，Lady Gaga 脸部呈现了变幻不断的虚拟妆容，甚至还出现了“蜘蛛爬过脸颊” 的神奇逼真场景。
在影视内容领域，2020 年上映的美剧《曼达洛人》以及 HBO 的《西部世界》都曾对 “XR 技术结合 LED 屏幕”有过核心运用，为拍摄和创意空间打通了一条“现实”与“虚拟”制作相结合的通道。
到了 2020 年 11 月，Billie Eilish 演唱会则利用 XR 技术打造出了巨型蜘蛛、宇宙空间、热带雨林等具有强烈视觉冲击的影像元素。
然而这一次， 在技术与内容的结合上，THE9 “虚实之城” 演唱会达到了一个新高度。
具体来说，它将影视级 LED 写实化虚拟制作和 XR 技术同时应用于演唱会直播上，从而兼备视觉上的电影感与演出的沉浸感——用爱奇艺首席技术官兼基础架构和智能内容分发事业群总裁刘文峰的话说，“这种形式就像拍电影一样地做演出。”
值得一提的是，这也是全球首个影视级 LED 写实化虚拟制作 XR 直播演唱会。
据官方介绍，为了这次演唱会，爱奇艺在包括研发、技术、设备、内容制作等在内的总投资超过亿元。
其中，在基础设施搭建上，爱奇艺搭建了其首个虚拟制作基地，这一基地在演出前就能够模拟整个 XR 舞台的情况：包括“需要什么硬件，软件怎么用，和拍摄怎么结合，直播如何进行”等各个环节。
由此，它也解决了导演团队和技术团队在内容想象力空间以及技术可操作性之间的问题。比如说，演唱会现场出现的森林场景，就是在虚拟制作基地中一边测试，一边进行 3D 建模制作而成。
在具体的技术投入方面，大量的 AR、XR 等虚拟制作技术、桃豆儿（直播间虚拟分身）等黑科技技术都在舞台上得以展现。
比如，XR 技术与影视级 LED 屏幕的结合是整个演唱会带来沉浸感的关键要素，由于 LED 本身的特质，它可以在人身上、皮肤上、穿戴物上做出投射，大大地增加了真实感；再利用场景的构造，实现虚拟物体的实体化，通过与表演的结合，传递出超脱现实却又十分真实的演出画面。
当然，如何在直播条件下将这种虚实结合的表演实时送达到观众面前，同样也是技术和内容进行融合的一大挑战。
爱奇艺智能制作部负责人朱梁透露，从创作一开始，所有的技术准备都是朝着“通过直播带给观众呈现更多的沉浸化的视觉感受”这一方向努力，搭建了实际的 LED 屏幕舞台，THE9 女孩是在实际舞台上一遍进行表演，制作团队一边合成背景和前景，以及扩展屏幕的边界。
另外，在实际演出中，表演者的舞蹈动作、摄影师的摇臂速度、沙漠、雨林、城市等 XR 虚拟场景的切换角度变化都要进行同频同步的配合，才能呈现自然，沉浸感十足的舞台表演。
雷锋网了解到，在这场演唱会的制作过程中，技术团队和导演团队也进行了密切的配合。技术团队很早期就和导演团队做对接，并进行反复测试——按照本次演唱会总导演的说法，技术团队甚至要对导演团队进行专门培训。
可以说，正是这样密切的配合，才让本次演唱会呈现出如此“哇哦”的视觉效果。
2
开创互动新花样
在这次演唱会上，技术不仅在内容呈现环节释放魅力，也在内容互动上大有作为，有力地弥补了线上场景与线下场景的固有界限。
实际上，在传统的线下场景中，表演者与观众在时间上、空间上都具备一体化，双方发生一种既定的关系——表演者通过表演吸引观众，观众关注着舞台的一切，通过挥棒、呐喊等发生实时互动。
不同于线下演出带来的现场体验感，一般的线上直播的表演形式始终难以让观众切身体验到演出的现场氛围，无论是多么震撼的现场演出，镜头、屏幕等搭载信息的载体不过是一连串数字或模拟信号，极易削弱用户的沉浸感。
那么，要如何在线上演出形式中保留线下演出带来的沉浸感？
对于这个问题，爱奇艺制作团队有着清晰的认知。朱梁表示，“完全复制线下的体验是不可能的，但技术可以带来新的互动体验”。
为了让用户在本次直播演唱会上获得类似于线下演出的参与感，爱奇艺团队在票务环节上就拿捏得十分到位，开发了云票系统，小小的一张云门票集中了观看、抽奖、装扮等权益，用户之间甚至还可以进行互动转赠。
不仅如此，虽然无法在线下面对面交流互动，但爱奇艺制作团队突破了空间的禁锢，让 300 余人跟 THE9 进行实时直播连线，一起做游戏，一起回答问题，聊天。
即使没被选中，观众可以通过虚拟身份形象进入现场直播间，利用弹幕形式加入互动，弹幕在AR 技术结合下会环绕整个舞台。另外，观众还可以挥舞与现场联动的应援棒，切换颜色，实现实时应援。
除了互动和参与，THE9 演唱会还赋予了观众自主选择权，设置了 10 个机位，将内容选择权交给观众，同时，观众还可以通过互动舞台投票决定 THE9 舞台。
在雷锋网看来，这些互动方式的改变不仅是为了突破线上演出的局限，而更在于定义下一代娱乐内容产品，重新定义观众与表演者之间、观众与表演内容之间的关系。
事实上，新一代用户群体已不满足于“接收者”角色，渴望成为“创作者”，参与到内容生产之中，而爱奇艺作为一个建设和连接用户生态的平台，正从各个方面满足用户的需求。
据了解，在过往的影视作品中，爱奇艺就曾经尝试推出互动剧，比如 2020 年初推出的《爱情公寓 5》，让用户决定剧情的走向，不仅提升了用户的观看体验，也有效增强用户粘性。
不仅如此，在今年 1 月的“尖叫之夜”晚会中，爱奇艺首次采用“同屏四看”形式，让观众自由选择观看视角，另外还专门设置了四个限定互动节目，由观众投票选择艺人进行限定表演。
在此次 THE9 演唱会上，爱奇艺利用自身的技术优势，同样别出心裁地推出了多个维度的互动参与形式，甚至是更进一步地协同用户与表演者、表演内容的关系，将用户与线上内容的互动关系提升到了一个前所未有的新层次。
3
定义下一代内容形态
作为全球首个影视级 LED 写实化虚拟制作 XR 直播演唱会，THE9 “虚实之城”虽然是大胆创新，敢为人先，但其实在它惊艳亮相的背后，爱奇艺可以说是“蓄谋已久”。
谈及爱奇艺为什么要组建一支智能制作团队，开启一次创新冒险之旅时，刘文峰表示：
爱奇艺已经解决了用户如何在互联网上如何拥有更好的观看体验，然后解决了在内容生态如何更好地创作出内容。 发展到目前这个阶段，无论是从历史上看，还是从当前面对的挑战来看，内容生态的挑战就是如何能够形成更大的供给，怎么获取更多的内容。
技术，成为内容生态和创新的关键突破点。
此前，爱奇艺已经在综艺领域利用人脸识别、语音识别进行智能制作，包括《奇葩说》、《中国新说唱》等系列节目都已利用 IT 提升协同能力和效率。
目前，在智能制作上，爱奇艺衍生出“虚拟拍摄”这一分支，主要包括两个方面：一是用 LED 屏幕取代绿幕的虚拟拍摄形式；二是虚拟偶像；而无论哪一方面，虚拟拍摄都离不开 XR 技术。
在国外，Billie Eilish、BLACKPINK、SuperM 等艺人的演唱会都曾以 XR、多视角观看等技术和互动方式，拉高了演唱会的制作水准。
在全球各行业受到疫情影响的背景下，在影视演出制作中使用 XR、VR 等技术已经成为趋势。
据不完全统计，受 2020 年疫情的影响，全球有 200 多个影棚都开始尝试利用 LED 屏幕制作的方式。不难看出，这些虚实结合、超乎想象的演出正在成为新潮流。
THE9 “虚实之城”演唱会正是顺应了这一发展潮流，但不同的是，THE9 演唱会采用的是影视级 LED 写实化虚拟制作，并且以直播方式进行，挑战更多，难度更大，耗资也更多。
可以说，通过 THE9 演唱会的尝试，爱奇艺正在开辟一个内容形态的新模式，虽然投入甚多，但其带来的“样本性意义”也是不言而喻的——在虚拟技术的加持下，无论是在内容层面，还是用户层面都被赋予了全新的定义。
刘文峰表示，虚拟技术可以将不同题材类型的内容用虚拟世界的这种体系连接起来，更能够呈现出一鱼多吃的那种梦想。
例如，一个IP 不仅能在游戏内，而且在电影、舞台上都能得到呈现，赋予的是一套相同的数字资产，这意味着制作内容的方式在不同的题材之间得到了极大复用和效率提升，不仅突破内容想象空间，而且扩展了内容形态更新的想象空间。
再者是用户与内容的关系，以及用户与内容生产者之间的关系。
在新一代的用户群体中，普遍存在一种更深层次的心理诉求——重在参与，年轻人需要刷“存在感”，表达自我、寻找同类。
换句话说，新一代年轻人在内容上已不能满足于“观看”层次，而是渴望互动和参与，过去传统的内容和形式已经无法满足现阶段的市场需求，内容市场需要适应个性化、互动化的形式。
在爱奇艺的尝试中，无论是 “一屏四看”，还是共创舞台、用户投票选择舞台等形式，都在极大程度上赋予观众参与、互动的权利，而这正与新一代年轻用户的需求极为契合。
由此，在技术的加持下，内容不再是专业生产者的专有领域，而是在用户参与交互之后才有的结果——用户既是内容接收者，同时也是内容创作的参与者。
技术打开想象空间，用户扩展内容边界，新一代的内容形态，正在发生着改变。
内容的未来，已逐步到来。
谁是芯片晶圆厂“基建狂魔”？| 十城造芯记
新基建一周年，狂热、下沉与拐点