构建首个虚拟直播演唱会厂牌，芒果TV如何连接未来？_风闻

本文来自微信公众号：壹娱观察（ID: yiyuguancha），文/大娱乐家。

在一场时长一小时的演唱会中，为七位歌手提供赛博朋克、黑暗阶梯、虚拟城市以及梦幻岛屿等7个不同的舞台场景，并营造出完全贴合其曲风并且随之变幻的视觉风格，在过去传统的现场演唱会上或许不敢想象。

但当这一切被放在了绿幕搭建起来的虚拟空间之中时，一切似乎变得轻而易举，并且缤纷了起来。

这个范例就是芒果TV打造的国内首个虚拟直播演唱会厂牌《潮音实验室》第一场说唱专场演出，那些过去被认为是过于狂野想象正在逐步成为现实，虚实之间的界限也正在被技术所打破。

《潮音实验室》虚拟演唱会

7组说唱型选手在符合其曲风与个人艺术表达的虚拟场景进行表演，让音乐重新获得了视觉表达，使得艺术表演不再受到空间和技术限制，更重要的是借助虚拟演唱会也让观众拥有了全新的演唱会体验。

正在用技术引领内容革新的流媒体平台们，也将进一步打破虚拟与现实的界限，带来全新的娱乐升级。

在虚拟空间的沉浸说唱表演，弹幕惊呼“太神奇”

霓虹闪烁的赛博朋克城市，特立独行的意象空间，色彩鲜明的汽车搭配微风摇曳的棕榈树。

七位说唱歌手每人演绎两首歌曲，虽然整场虚拟演唱会仅仅一个小时，但整个演出一共出现了7个完全不同的虚拟场景。风格各异的舞台场景共同构成了让人耳目一新并且个性十足的说唱新天地。

文娱产业近十年一直在拼内容实力，但如今已迈入需要下一代内容的分水岭，谁能做出消费者真正感兴趣的内容，在体验上有所革新，是制胜关键。同时，这也将形成全新的商业模式。

事实上，娱乐行业每次有关虚实结合的探索都是对次元壁发起的“破壁行动”。

《潮音实验室》虚拟演唱会说唱专场无疑也是一次打破“次元壁”的尝试：即在有限的三次元屏幕中，呈现出无限信息量。这在一定程度上用XR技术打破了三次元中对于空间与时间的限制，把观众带入到更多元的次元空间，享受前所未有的沉浸感和震撼力。

《潮音实验室》虚拟演唱会

当然，除了单纯的“视觉冲击力”外，《潮音实验室》虚拟演唱会说唱专场还有很多隐藏在细节里的技术深度和项目内涵：整场演唱会采用了全球顶尖的3D深度的实时虚拟系统，一来是让真人能够与虚拟实时交互从而打破次元壁，再有便是实现了虚实多机位跟踪，即便是在绿幕前也能展现镜头的运动调度，最后则是景深光照无限还原真实场景。

多机位相机完成真实世界空间和人物的实时三维深度计算及重建，然后把重建完的人和物体融合进三维虚拟场景内，使人可在虚拟空间内同虚拟的人、场、物进行实时交互，并同步实时渲染出直播视频流。

要到达最好的效果，最终的成败还在算法上。基于深度信息算法的实时呈现三维空间与真实人物实时交互体验，自主研发的实时光影合成算法，提升了三维空间融合真实人物的精度和品质。而正是这些技术的运用从而能够带来了极致视觉感受。

像是全场第三位出场的白吉勒，他的舞台则完全是根据他的歌曲也设计而来的随性视觉风格，无尽天空中飘在云雾里蜿蜒曲折的公路，色彩鲜明的汽车搭配棕榈树，明暗交错，不同的视觉元素增添了丰富的细节，歌手在演唱时动态的公路以及漂浮晃动在空中的仪表盘，提升整个舞台的深度和立体感，也能展现表演者的移动路径，使整个表演更加生动真实，快速将观众拉进了听觉与视觉共同营造的梦幻场景中。

而最后出场的AJ赖煜哲，整个场景运用黑白色调，水中的一轮圆月与山合一，仿佛从水中涌出，水天一色，皎皎空中孤月，整体视觉更显高级。开场便给了他一个现实场景中无法实现的超级纵深镜头，营造出了极强的空间感。给整个视觉场景提供了充足的空间，让观众都能够有最大最独特的视角。

《潮音实验室》虚拟演唱会

随着他的第二首歌旋律响起，背后的场景也从圆月转换为一双手从圆月中伸出，演唱嘉宾站在双手捧着的银河中，耿耿星河如同一场梦境，再利用灯光阴影带来立体的效果，让整个场景变得更加形象生动，歌曲情绪在视觉设计中得到最大的传递。

每首歌、每个表演元素，乃至歌手对个人作品的想象力与情绪，都被具象化的呈现于舞台之上，相当于在表演期间为每个艺人提供了各自专属的领地。并且这种虚拟场景还能够进一步放大舞台艺术的无限想象力，尤其是那些过往在现实中无法实现的场景。

而在这些完全为其个人风格打造的“舞台”上，歌手们自然能够更忘我的完成演出。

另一方面，《潮音实验室》虚拟演唱会说唱专场实现过去人配合舞台到如今舞台360度配合人的技术突破。从评论的角度，当我们谈起“沉浸感”时，总会下意识站在观众视角思考问题。事实上，表演者本色的沉浸感也很重要。

然而传统实景舞台存在很多限制因素：比如为了提升舞台动态感，艺人要在恰当的时刻站上升降机，或是在舞台布景区域寻找各自区域。当然更重要的是不同的场景切换费时费力，在传统演唱会中，往往都有较长时间的黑幕等待舞台切换。

当然，虚拟制作也并非全然比传统演唱会更简单，相反而言，虚拟演唱会对运镜的要求更高，由于虚拟演唱会的真实舞台空间只是几块绿幕搭成的空间，和传统演唱会的巨型舞台有差别，再加上和虚拟视觉场景的配合，演出嘉宾可活动的空间有限，所以大多数要通过运镜和机位切换来展现恰到好处的镜头语言，体现出层次感。

《潮音实验室》虚拟演唱会场景搭建

当然虚拟直播对于依靠技术来驱动内容革新与增强互动感上，更有着巨大的使用价值与现实意义。

虚拟直播本质上是用一个实时渲染的、任意变化的，甚至是用户驱动变化的虚拟舞台去承载明星的表演，舞台的变化和艺人的表演要做到无缝对接，舞台的变化和音乐的节奏及歌词要做到无缝对接，因此算法在其中发挥了重要作用。一方面，舞台特效和运镜特效随着音乐联动，另一方面舞台的变化也要随着表演者动态改变。未来，观众的互动也会实时改变舞台，虚拟直播将越来越像一场群体互动游戏。

从目前的效果上来看《潮音实验室》虚拟演唱会是一场成功的实时“云演出”。

娱乐产业正在被技术深刻地改变着，人们都在寻找一个答案：科技跟娱乐结合的终极形态是什么样的？正在不断追求内容与技术革新的芒果TV用《潮音实验室》虚拟演唱会厂牌给出了自己的答案。

流媒体步入技术驱动内容时代，芒果TV给出新解法

事实上，在疫情对全球的线下娱乐产业造成巨大冲击之后，线上娱乐也借此机会迎来了一次主动引领变革的机会。

从去年以来，几大当下最知名的音乐团体和歌手，如防弹少年团、BLACKPINK、Billie Eilish等人的演唱会就通过以XR、多视角观看等技术和互动方式拉高了演唱会的制作水准。

从这种内容呈现与资本流动趋势不难看出，流媒体竞争的上半场的竞争往往还是建平台，来到下半场的竞争则是通过技术引领内容革新。

某演唱会中无数萤火虫在光影森林中翩然飞舞

过去的“芒果模式”是把握4G移动互联网崛起时机的改革产物。随着5G网络的大规模落地，5G不仅为平台超大体量内容的实时传输提供了支撑，更因为它的高速率、低延时和大容量，深刻地重构着内容创作体系。

在这个层面上，芒果TV的部署走在前列。在2019年举行的中国新媒体大会“5G时代的新媒体变革”论坛上，芒果TV总裁蔡怀军就曾表示，做5G时代创新引领的媒体平台，主要包括两个层面，一是为我所用，坚定不移做内容；二是拥抱技术，坚守平台价值观。

2018年，芒果TV成立创新研究院，对5G、AI、VR等前沿技术前瞻布局。去年，芒果TV还构建芒果云技术及大数据应用中心，为即将到来的5G时代，铺垫加码。

5G高速率带来时空关系的重构。如电影《头号玩家》里构建的虚拟世界，在用户体验的层面，时空关系的边界被完全模糊。沉浸式体验不再需要苛刻的场景、昂贵的声光设备，而是可以随时随地进行模式切换。沉浸式视频将是一个巨大的市场，但也对平台和内容提出了极高的要求。

基于对5G、AI技术的积累和对内容走向的理解，芒果 TV在业内试水落地互动视频创新。

2019年年初，芒果TV上线的互动剧《头号嫌疑人》、芒果互娱去年上线的互动游戏《记忆重现》。其中，互动剧《头号嫌疑人》，采用“边看边玩”的沉浸式互动体验，将内容创作与互动技术有机结合。除此外，芒果 TV 为此还研发了互动剧制作平台，为接下来批量化生产互动产品创造技术基础。

互动剧里提示线索

同时更低的时延带来创作交互关系的新范式，例如在互动剧中，千万个用户成为了内容的主角，是推动剧情进展的关键要素，是内容的创作者。而像是《潮音实验室》虚拟演唱会说唱专场，其直播系统打通了芒果TV中台，创新的实现了互动礼物在虚拟3D场景的触发和融合，使得直播活动更像是一场互动游戏。

更重要的是当下的流媒体平台必须不断探索在技术层面的前沿，而不断加大资本投入几乎是必经之路。作为上市公司的芒果超媒过去两年连续进行资本募集的投向，比如引入中国移动全资子公司中移资本，也说明了芒果TV加码内容构建高门槛长视频的决心。此外，芒果TV对于一些技术驱动带来的新兴内容消费形态。

而作为大型流媒体平台，除了要能做到像互动剧、虚拟直播等前端直接可见的技术创新，另一方面，大量的数字基础建设更是不可或缺。

比如云数据、云计算、云存储等技术，大大降低了对用户终端设备的要求，从而降低了交互和体验的门槛。5G时代，终端将只是一块屏幕，而云将成为新的流量入口，产业结构的大变化也将由此而来。2018年年底，芒果TV与华为签订战略合作协议，未来将在5G商用的风口上运行更多内容，在技术和用户之间架起一座桥梁。

《潮音实验室》虚拟演唱会说唱专场更像是芒果TV在新兴技术探索布局上的一次综合成果展示。自2016年开始，芒果TV不断积累着AR/VR等新兴技术，至今已推出了包括虚拟主持人“YAOYAO”、AR明星合拍互动系统、互动视频平台、IMGO超高清视频修复和增强平台以及互联网4K超高清生产播出平台等在内的系列化5G、AR/VR、超高清视频技术创新成果。

《潮音实验室》虚拟演唱会

9月22日，芒果超媒也在投资者互动平台明确对外界表示，其先后与中国移动、华为等公司达成相关合作协议，并与高校合作打造了中国第一家、全球第三家VR应用实验室，联合多方持续围绕智能影像视觉、光场技术、AR/VR、5G 全息等核心技术展开联合探索。

毫无疑问，9月29日的《潮音实验室》虚拟演唱会说唱专场仅仅只是一个开端。

相对视频流媒体行业领域的竞争者们，芒果TV的优势在于较为成熟的内容生产能力、广泛的用户基础和明星生态，一旦能够在技术革新中进一步占据先机，无疑将持续放大芒果生态的效益。

与此同时，传统广电融合也正在经历人工智能、5G和大数据等技术的冲击，以移动智能终端为载体的新媒体成为主流，如何利用新平台的特性打造相应的内容并引领文化趣味成为广电们的转型难题。芒果TV在技术实践和转型上的示范效应，显然也能为整个行业突破困局，提供一些更加具有确定性与前瞻性的借鉴价值。