XR为舞台艺术插上科技之翼

独乐乐不如众乐乐。从央视春晚应用在舞台节目演出的XR虚拟布景、2022北京冬奥会开幕式运用的缤纷炫彩的AR中国结、再到刚刚过去的中秋节河南卫视在XR摄影棚录制的《中秋奇妙游》以及咪咕在厦门打造的元宇宙AR夜景秀……

VR/AR/MR已经摆脱了小众娱乐的“标签”，成为普通老百姓从电视机上、手机上、甚至走在路上就能享受的娱乐方式。

XR虚拟演播室备受追捧

今年中秋节，河南广播电视台凭借《中秋奇妙游》为主题的国潮晚会再次“出圈”，受到人们的热议和追捧。AR吉祥物和XR虚拟拍摄技术等黑科技成为助力整场节目精彩呈现的幕后英雄——栩栩如生的AR极兔形象贯穿整场晚会、写有古人诗词的书页如树叶般飘荡，舞台背景可以从唐朝盛世的皇宫秒变现代博物馆，再变换为人们站在月球遥望地球的场景……

据了解，为了实现更好的视觉体验，2021年河南广播电视台将600平方米演播厅改造成XR沉浸式4K扩展现实演播厅，该演播厅的投入使用成为节目内容和文化创意创新探索的科技助力。

不仅是河南广播电视台，国内很多媒体、电视台都对其演播室进行了改造和升级。2019年，新华网打造了LED沉浸式MR演播室，成为首个将混合现实与人工智能技术常态应用的媒体机构，掀起了媒体演播室数字化改造的热潮。2021年以来，越来越多的媒体引入XR演播室：番禺区融媒体中心建成了广东省首个XR沉浸式演播室，将高清虚拟演播室全面升级改造为4K XR沉浸式智能演播室。武汉市汉阳融媒体中心建成了湖北省首个XR虚拟演播室，配备了LED显示、三维渲染、实时拍摄和空间跟踪定位等配套系统，可实现逼真虚拟背景并实现XR节目的实时录制。此外，北京星光影视园的星光xR虚拟演播厅也已经服务了央视总台、广东广播电视台等诸多电视节目和企业发布会。

XR演播室为何成为广电媒体业的“香饽饽”？在节目中加入AR、VR等XR元素为何成为当前流行趋势？

利亚德集团副总裁兼COO、虚拟动点董事长姜毅在接受《中国电子报》采访时表示，驱使越来越多媒体和节目导演组使用XR、AR、VR等黑科技制作节目主要有三个原因：一是，传统美工布景无法100%呈现出艺术家脑中天马行空的想法，而借助XR等技术这些创意想法可以被原汁原味的呈现，黑科技开拓了艺术家还原艺术的新路径。二是，XR科技呈现出的整体舞台效果更加炫酷更加丰富绚烂，给观众的直观感受更加震撼和赏心悦目。三是，XR虚拟影棚可以大幅降低运营成本，提高盈利效率。

姜毅举例说，利亚德也在用AR/VR结合数字化的手段去制作儿童剧和舞台剧，相比以往大型演出的演员工作人员的总人数往往会达到上千人，员工成本和演员排练和管理都十分复杂。数字化演出背景和技术手段大幅降低了参演演员的数量：伴舞演员可以通过虚拟化的手段呈现，几个主演就可以完成一台大型的演出。“数字化解决方案和电子显示屏都是只需一次性投入，后续的运营成本很低，因此大家愿意去尝试这些数字化的方法降本增效。”

据了解，利亚德曾参与国内外二十余家媒体的演播室数字化改造，还参与了很多XR沉浸式演出的创意和实践，如打造了今年春晚的720度穹顶空间LED屏幕、旗下数虎图像担纲2022河南春节晚会XR创意太极《下一秒》多媒体视觉创制、旗下的德火科技为新华网媒体创意工场打造LED沉浸式MR演播室。

AR技术扮“靓”城市夜景

如果说XR虚拟演播室的应用，百姓可以从广电节目中领略XR科技的魅力。那么AR技术的应用，则让人们更好地感受到实景与AR交互的震撼。

今年，北京冬奥会开幕式导演组就利用AR技术来呈现中国结。通过电视转播画面，观众可以看到，中国结的红线从四面八方结在鸟巢上空，编织成一个巨大的红色中国结。红火的“中国结”通过AR动画特效缠绕在巨型雪花火炬周围，仿佛为雪花主火炬“穿上”了一件流光溢彩的新衣，最后悬停在鸟巢上空，仿佛一个巨大的实体中国结装置。AR技术的加持给电视机前的观众带来了巨大的震撼和感动。

9月初，厦门的市民大饱眼福，体验了一场AR夜景秀。皎皎明月缓缓从海上升起、海豚和鲸鱼争相跃出海面、钢琴家演奏出的音符在空中飘荡、绚烂烟花在空中绽放、白鹭女神像逐渐升起……这些画面来自中国移动咪咕公司在厦门鹭岛打造的AR夜景秀，AR技术赋予了厦门地标建筑更绚丽的色彩。据了解，市民在鹭岛沿途的三个AR体验点登录手机APP，打开相机就可以体验这些虚实交融的画面。

咪咕新空云AR事业部总监徐夏丰在接受《中国电子报》记者采访时表示，这场AR夜景秀覆盖面积十分广阔，其海域跨度总长达6.5公里，覆盖面积超百万平方米的AR夜景秀，为路人提供了海陆空间交互、虚实空间交织的超时空体验。 

想要完成这场AR夜景秀并不简单，徐夏丰为记者介绍说，此次AR夜景秀综合应用了高精度建模、虚实融合渲染、定位追踪、智能交互等融合技术解决方案。在实施过程中，团队最终实现了厘米级精度、毫秒级时延的增强现实体验，解决了弱纹理、复杂光照场景（如海面）下如何强化AR感知跟踪等难题，让观众在炫目的色彩中依然能清晰看到细微处的动态变化，真正实现了全场景下虚实融合的沉浸式数实互动体验。“ 最终元宇宙AR夜景秀项目圆满落地，呈现效果也一如我们预期受到了市民体验后的诸多好评。”徐夏锋表示。

舞台技术仍有探索和提升空间

近年来，伴随多样应用场景的落地，实时数字孪生、定位追踪、虚实融合渲染、多模态动作捕捉、双管线云端合成渲染等相关技术也在实践中不断成熟。

据了解，中国移动咪咕公司在年初打造了国内首场虚拟交互冰雪音乐嘉年华“集光之夜”。徐夏丰介绍说，本场演出采用了三大主流技术：一是XR+AR融合应用，全XR拍摄制作+LED屏演播区外延的增强现实（AR）扩展，达到了XR与AR虚拟制作融合的效果；二是多模态动作捕捉，可以实现虚拟偶像的实时驱动模型在XR渲染引擎内渲染，与真人演员一起完成录制。三是双管线云端合成渲染，保证同一个场景在两端渲染，并且场景、用户交互数据能够在两端实时同步。

行业专家告诉《中国电子报》记者，诸多核心技术在各企业主体推进应用落地探索时得到了突破和落地。

对于VR、AR、MR、全息显示等技术在演艺舞台上的呈现，行业从业者则表示技术仍有进步和提升的空间。姜毅认为，科技发展仍有巨大提升空间。他举例说，当前全息演讲当前受环境光影响制约较大，让全息影像更加突出就需要环境对比反差很大，需要对环境和设备进行改造和优化。未来随着科技的进步，可能会逐步降低对环境条件的挑剔度，呈现的虚拟形象也会更加鲜活。此外，脑机接口、语音口令等更智能的技术将代替人们的手工作业；未来这些技术的呈现的分辨率、对比度也会越来越高，呈现的效果更加的鲜活灵动。

尽管相关技术还未尽善尽美，但行业从业者都十分看好XR在演艺影视行业的发展前景。徐夏丰表示，在元宇宙这一下代互联网的大背景下，企业主体更有意愿去探索VR/AR/XR在各个行业的应用落地，这个过程也将积累大量底层技术、沉淀了大量的人才，这些都将推动整个行业的持续爆发。姜毅表示，随着制作方对成本控制的诉求就会越来越强，数字化的影像呈现代替人工将成为一个刚需。随着科技的进步，相关技术发展的越来越简单好用、数字化的影响会越来越逼真，这也会让数字化在舞台表演中有更多的用武之地。