编译/VR陀螺
MIXED与VR180视频创作者Björn Sondermann和Jérôme Lozano谈论了他们在拍摄沉浸式内容方面的经验。本文作者Daniel Pohl是immerVR GmbH的首席执行官兼创始人,主要研究在VR180照片和视频沉浸式媒体领域的创新形式。以下为编译内容:
Sondermann和Lozano二人已经制作了一些令人印象深刻的VR180 3D内容,用特有的形式记录不同乐队的演奏音乐,部分作品在质量和摄影方面超越了许多专业发布的内容。
RocknGroll plays - One Sunny Day - 8k VR180
他们是如何开始创作VR180 3D内容的?对他们来说拍摄过程会遇到什么问题?他们的创作之路又将走向何方?本次对话将进一步讨论这些问题以及更多内容。
很高兴你们能来谈谈那些激动人心的VR180视频项目。你们是如何进入VR180视频制作领域的?
Sondermann:对我来说,一切都是从最初的Oculus Rift DK1开始的。尽管我本人有轻微的晕动症,但我依旧对这项技术非常着迷。在随后的几年里,我观看了大量360°和3D VR视频。PSVR上的小提琴家Joshua Bell的VR体验也给我留下了深刻印象。直到2020年,我亲自尝试了各种VR180 3D相机进行拍摄,如QooCam和Insta360 EVO,并由此创办了YouTube频道“We are VR Music”。
我觉得用虚拟内容来补充真实拍摄的世界特别令人兴奋。例如,使用Blender或虚幻引擎等工具将3D场景或文本整合到VR180 3D视频中。大约一年半以前,我通过Lozano创作的令人印象深刻的VR180音乐视频《SUIR - Vampires》认识了他。他创作的VR视频没有让我产生任何晕动症。从那时起,我们就经常一起拍摄VR视频。
180°3D视频“Mängelexemplar”(图源:Lozano)
Lozano:我从事后期制作和视频剪辑工作,涵盖商业广告,我还执导过小型音乐视频。我当时是使用Insta360 X2相机为法国乐队“Blind Delon”拍摄360°2D视频时,才开始接触VR视频的。通过YouTube VR,我才对这项技术有了更多了解,然后我开始接触180°3D视频,这对我来说更加有趣。之后,我们使用Insta360 EVO制作了音乐视频“Mängelexemplar”,并在(2022年的)阿姆斯特丹国际纪录片电影节上展出,获得了一等奖。
后来,我购买了佳能R5 C + RF5.2mm双鱼眼镜头。大约花了两个月的时间,我找到了使用它进行拍摄和剪辑的正确工作流程。之后,我们与Sondermann一起拍摄了更多的VR内容,例如专注于POV(主观镜头)拍摄,通过音乐家的视觉来展示内容。由于其设备60 fps的8K的特性,我们已经可以提供非常逼真的演示效果。
您对未来的VR相机有什么期望?
Sondermann:对我们来说,高效的工作流程非常重要。因此,如果能直接从相机拍摄矩形格式的图像(而不是使用鱼眼镜头再进行转换),将大大简化我们的编辑工作。特别是在RAW处理方面,由于编辑器中的节点较多,我们编辑VR视频时会非常繁琐。
Lozano:对于专业录制的预算来说,目前配备8K视频和60 fps的相机相对经济实惠。不过,如果有企业能向消费市场推出新的、更简单的VR180相机,以推动整个VR180市场的发展,那将是非常理想的。这将带来更多的内容和更好的工具。我还发现拍摄RAW视频非常困难,因为你不知道在VR中最终会得到什么。
佳能R5 C配备RF5.2mm双鱼眼镜头,可用于制作VR180 3D视频(图源:Sonermann、Lozano)
您是否已经尝试过90 fps的拍摄设定?
Sondermann:是的,通过使用AI工具(如 Topaz Video AI)对帧数进行高采样。这样可以减少运动过程中的运动模糊,创造出更高水平的整体真实感。大多数观众现在可能不会接受90 fps,因为他们还不习惯。一旦用户习惯了,可能就不想回到较低的帧数了。
您认为 VR180 视频的最低规格是什么?
Sondermann:对于VR180 3D视频来说,入门级水平6K和50/60 fsp就差不多了。我们最近用Calf(开飞)相机进行了测试。工作流程要简单得多,因为镜头是直接以等距矩形格式存储的。但只有了8K分辨率及以上,才会更令人兴奋。一些由相机机身和VR镜头组成的新设备可以提供4K VR180 3D视频。不过,在这种低分辨率下,用户可能会不感兴趣,三星Gear VR上的首批VR视频就是这种情况。当时只有低质量的视频,这让许多用户望而却步。当然,头显硬件领域最好能变得更普及,Meta Quest 3就在很多方面都做得很好,质优价廉。
Lozano:目前8K视频的质量已经非常好了。但主要欠缺的是内容的传播,而且要知道用户想看什么?是音乐视频?还是旅游视频?在许多VR视频平台上,例如YouTube VR,要播放视频也略显繁琐。需要多次点击才能将质量调整到视频体验所需的水平。
近年来,您认为VR视频市场最重要的变化是什么?
Sondermann:在我们看来,是佳能进入专业VR180视频领域这件事,这是一个非常大胆的举动,我们对此感到非常兴奋。Meta Quest等独立VR设备的出现也改变了很多,因为现在无需线缆就能舒适地观看VR视频。
从音乐人的角度来看录制VR音乐视频(图源:Catalina Abu)
VR中的晕动症:您有哪些经验,又是如何应对的?
Sondermann:在玩一款游戏时,我在PSVR中体验到了严重的晕动症。游戏要求玩家在VR中与老鹰一起飞越巴黎。老鹰飞向你面对的方向。当时,我试着每天这样做几分钟,但没有任何改善。而当我进入VR视频领域时,我没有在视频中做出快速移动、大幅度运动等动作。我们现在知道,如果要在VR视频中移动,应该控制移动的时长,这样不适感会消失得更快。
Lozano:我自己也很容易出现晕动症。不过,在这种情况下的好处是,我们制作内容时可以快速评估晕动症对敏感用户的影响。对视频中的各种移动动作会非常谨慎地处理,令相机的执行速度变得非常缓慢。各种动作必须使用云台才能获得稳定的效果。在这方面,VR180 3D视频与传统视频相比具有相当大的局限性:不能快速移动,甚至不能飞越舞台,展示音乐家或其他内容。有时我们会在VR中尝试不同的想法,但这可能很快就会出现晕动症。
摄影机与拍摄对象之间的最小距离是多少?
Lozano:50厘米是最小距离,但我们尽量保持接近1米的距离拍摄。我们还尝试过对音乐家的手部拍摄特写,但遗憾的是,效果不是很好。
在VR180 3D视频中,个人在剪辑方面应考虑哪些因素?
Sondermann:我们尽量避免在不同场景之间过度移动焦点。这对立体视觉尤为重要。我们还尽量将有趣的物体放在中心位置。理想情况下,整个镜头都应保持对焦。我们目前有一个与Pearl Drums合作的项目。该项目聚焦音乐家George Kollias演奏大型架子鼓的高端表演。镜头有多次视角变化,首先从正面拍摄,然后在40厘米的距离上直接拍摄鼓组的Demon XR脚踏板。整个过程令人叹为观止,因为演奏者的速度极快。这也使得切换视觉的速度大大加快。
Lozano:15秒的长镜头效果很好,能让用户有时间环顾四周。但5秒或6秒的左右的视角切换也会非常令人兴奋。但你必须确保内容在视野的中心位置,也必须做好人们无法在短时间内环顾四周的准备。只出现1秒钟的场景对于VR180 3D视频来说毫无意义。作为一个经常从事剪辑工作的人,在这个没有固定规则的VR新领域工作让人非常兴奋。在转场方面,我们主要使用硬剪,有时会使用淡入淡出。
Meta Quest上的VR180 3D金属摇滚视频。这是Sondermann和Lozano在英国鼓乐展上的照片(图源:Joby Catto)
你们在360°3D视频领域有尝试过吗?
Sondermann:360°3D视频在我们看来不是很好用,因为它几乎无法告诉用户该看哪里。你需要用箭头或其他东西把用户指向某个方向,实际上很难做到。我们认为在VR180中效果更好,因为相关信息都在中心位置。如果是通过无人机拍摄巴塞罗那等城市上空,这时候你可以向任何方向看,360° 3D视频就会有附加价值,但在讲故事的环节时就不行了。就360° 3D视频而言,目前还没有一款好的3D相机能从所有角度进行拍摄。
您在6DoF视频创作方面有什么经验?
Lozano:以我们的“Mängelexemplar”视频为例,我们使用LifeCastVR制作了一个6DoF版本。你可以在LifeCastVR上查看。我很喜欢这种体验:可以在视频中移动,能以一种有趣的方式与内容互动。当然,人为设定的3D运动还存在一些缺陷,不够完美。它更有复古的8-Bit风格,与音乐视频的装饰风格相得益彰。这给人一种复古未来主义的感觉和相当独特的体验。
您还有其他VR视频项目想重点介绍吗?
Sondermann:我们刚刚开始与spacevibes合作,在苹果Vision Pro上播放视频。Vision Pro的视频规格让我们非常感兴趣,也许还能用于即将进行的6DoF内容创作实验。我们仍在寻找新的平台。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息