文/VR陀螺 ZJ

在疫情的影响下，尽管观众在很大程度上不能亲身前往各种音乐现场，但有了技术的加持，他们可以选择使用VR体验现场表演。

这个领域的创企MelodyVR已经与Live Nation合作，在伦敦标志性的O2 Academy Brixton为观众们提供了360°的VR演出。

时长90分钟的现场VR表演

（图源：Derek Bremner）

这些节目包括Tom Grennan、Frank Carter & The Rattlesnakes、Burner Boy、Fontaines DC、Kaiser Chiefs和 Blossoms的90分钟表演，歌迷可以选择从多个镜头角度进行观看，并且能够通过智能手机和VR头显的MelodyVR应用程序观看。

MelodyVR的技术生产经理Matthew Williams说道："我们希望，最终用户能够通过在不同摄像机机位之间来回切换，自己成为现场音乐表演的导演。使用沉浸式视频能够将歌迷与他们喜爱的歌手聚集在一起，这在疫情期间显得尤为重要，因为他们无法亲自参加这些演出。"

 5台4K 360º VR摄像机与6个“跳跃点”

5台使用多个索尼4K传感器的360º VR摄像机设备被安置在O2 Academy的前厅、舞台一侧和舞台上的鼓手、键盘（或萨克斯、低音吉他等等，取决于表演的实际情况）以及主唱的位置。MelodyVR还为用户提供了6个“跳跃点”，用户可以在这6个不同视角之间来回切换，体验当导演的感觉。

当信号离开每台摄像机时，它会通过由多台 Blackmagic Design 设备组成的广泛网络进行路由。30多台Teranex Minis转换HDMI、SDI和光纤，3台Smart Videohub 12G 40x40作为制作的主矩阵管理所有的4K信号。

每个4K镜头信号都被输送到装有DeckLink（4K和8K）卡的电脑上，用于高分辨率360°视频的拼接、播放和编码，拼接软件来自瑞典开发商Voysys。

Williams解释说："拼接后的360°视频是由一个16x9的等角图像组成，并添加了顶部和底部图像，观众实际上是把他们的头放在一个三维视频的球体中。"

拼接处理仅需400毫秒，并通过ATEM Constellation 8K切换画面，它还能为MelodyVR的制作团队在现场和远程生成四个多视图。

舞台背后（图源：ibc）

vMix是现场视频制作软件解决方案，带有TouchDesigner，可用于图形叠加和VFX动画。直播流从vMix输入到云端，MelodyVR在那里拥有自己的定制云分发网络。它能够以多种比特率向访问MelodyVR应用程序或网络播放器的终端用户提供流媒体。

来自现场表演的所有信号，包括单个镜头和等距柱状投影输出，都以ProRes HQ格式记录在Blackmagic Design HyperDeck Studio 12G中。

"这为我们提供了比特率和未来分级的最大范围，"Williams说道。"如果我们需要重新拼接任何东西，就可以直接回到源头去做。"

就像一场人满为患的音乐会一样，IMAG屏幕会显示从各种Blackmagic PCC 6K、Micro Studio Cameras、URSA Mini Pro 4.6K和PTZ机器人摄像机拍摄各种角度的现场2D内容，在这些地方他们无法让操作员上台。

Williams表示："360°沉浸式视频并不是用户经常会体验到的东西，并且在音频不同步或有某些技术问题的情况下，这些体验可能并不会太愉快。对我们来说，关注流的可靠性真的很重要。”

"我们在直播前会进行多次彩排，并对不同类型的灯光和LED屏幕进行多次内部测试。我们不断地把摄像机放在我们以前从未尝试过的位置上，"Williams说道。

 疫情下的远程工作流程

社交距离的限制意味着一切设置都要比平时更加严格，制片人不得不削减现场工作人员的数量。

Williams表示："我们所谓的'作战室'，也就是我们的操作室，大部分都是远程的。我们所有的拼接工作都是远程完成的。我们只会将一个核心团队放在现场，并对在现场的人员进行多技能训练，以尽可能地实现远程操作。我们的机架系统是以一种保持社交距离的方式来设置的。我们所有的操作员都相隔两米，并在现场有明确的隔离措施，这样表演者们就不必与工作人员接触了。我们在入口处使用QR码，并记录每个人，同时个人防护设备都是强制性的"。

在O2 Academy进行的表演

（图源：Derek Bremner）

他继续说道："远程工作流程给我们的互联网线路带来了更大的压力。我们有三条线路进入学院，包括一条卫星链路和两条来自不同供应商的硬接线，所以如果有任何问题发生，我们都保证会有即时备份。我们有多个操作员在这些节目中远程工作，有些远在美国，但有些在黑斯廷斯和英国其他地区。"

 虚拟舞台上的互动

在Frank Carter和团队的努力下，MelodyVR 与 Innovate Live一起设计了一种“舞台入侵”效果，其中被选中的粉丝有机会与艺术家们一起虚拟地出现在舞台上。

"想象一下，在舞台背后的LED屏幕上显示的一个巨大的多视角网格中，有150名粉丝正在进行Zoom通话，"Williams说道。"人们通过家里的网络摄像头参与进来，我们可以看到他们跳舞、与宠物坐在一起、喝酒、弹吉他，玩得很开心。”

"每隔一首歌，我们就能选择一个人坐在'热门座位'上。我们的想法是让某个人在屏幕中间突然出现，与Frank进行一对一的对话，他们可以点歌。因此，这是一个在巨大舞台上进行的Zoom通话，甚至Frank Carter的妈妈也曾出现在屏幕上。”

他继续说道："我们必须在家庭用户和Frank之间配置音频延迟，以便使他们能够正常互动并使一切保持同步。这需要大量的反复试验，虽然困难重重，但我们还是成功地在节目中实现了这一点。"

无论是6个"跳跃点"还是可供观众选择的摄像机位置，都是4K流式传输。MelodyVR正在开发平铺编码，因此它只流式传输观众正在查看的那部分流。

"我们希望在实现高质量用户体验的同时获得低比特率，这样那些使用低互联网带宽的用户就可以获得4K及更高质量的内容，" Williams说道。"我们正在努力突破沉浸式视频可能性的边界"。

MelodyVR正在探索深度映射和6DoF，这样在现场表演中，用户就可以虚拟地在舞台上走动。

工作流的元素将使他们能够在下一步制作8K VR。Williams表示："当我们的相机系统确实提升到8K分辨率时，就能拥有8K兼容的硬件。"

MelodyVR的一位用户对去年圣诞节前举行的演出给予了不错的评价，其写道："虽然它（通过VR观看现场演出）永远不会拥有与在现场看乐队表演那样相同的原始能量，但在我们能够再次回到现场之前，这套节目是一个很好的替代品。"

 MelodyVR或将挑战Spotify

MelodyVR是一家AIM上市公司，成立至今已有5年，目前其估值为7400万英镑，该公司称其是唯一获得许可的VR音乐平台。它还声称拥有世界上最大的沉浸式和互动式音乐体验库（约1800首曲目），这些曲目来自Post Malone、Kelly Clarkson、Fall Out Boy和The Chainsmokers等知名音乐人，并与O2 Telefónica和Facebook建立了合作伙伴关系。

图源：MelodyVR

去年8月MelodyVR以7000万美元收购了美国公司Rhapsody International，该公司拥有数字音乐先锋品牌Napster。Rhapsody在2019年拥有108亿个流媒体，收入为1.13亿美元，其背后是每月向用户收取9.99美元的无广告订阅模式。Napster在全球有300万用户，并拥有9000万首授权曲目。

此举使MelodyVR与Spotify和苹果iTunes等公司形成了更直接的竞争。

MelodyVR首席执行官兼执行主席Anthony Matchett在一份声明中说道：“ MelodyVR对Napster的收购意味着将沉浸式视觉内容和音乐结合在一起的音乐娱乐平台即将诞生。对于当今的音乐迷来说，现场音乐和录制音乐有着内在的联系。我们渴望看到喜欢的艺术家进行现场表演，就像我们聆听他们的专辑一样。我们收购的Napster是音乐行业的翘楚之一，其可以无缝提供音频和视频媒体，这为提供真正的下一代音乐服务奠定了基础。”

就像体育一样，用VR直播现场音乐表演有效地消除了场地的容量限制，使无限数量的粉丝能够在VR中观看本该门票售罄的演出。在人们能亲临现场观看音乐演出之前，VR已经展现了更多潜力，并成为了一项收入来源。

原文链接：

https://www.ibc.org/trends/vr-gigs-point-to-the-future-of-live-music/7627.article