硬件

现场实时演示,瑞立视发布虚拟拍摄系统拓展多元化市场

发布时间:2019-08-06  |  标签:      

文 | 镜

2019年7月31日,台风暴雨天 


在前往瑞立视“魔登视界”发布会的路上,陀螺君一边在吐槽华南地区办活动遇台风天的影响,另一边又在回顾瑞立视近些年的动向以及此次发布会,瑞立视会透露哪些方面的动向?

图片信息来源:Greenlight Insigts

从去年下半年至今,我们能明显得发现整个VR线下娱乐市场在往泛娱乐方向、主题化、多人联机及大空间的趋势发展,而瑞立视在这当中便充当着一个重要的角色。但是以目前Steam2.0大空间方案和下半年即将推出了Quest大空间方案相比,瑞立视能找到哪一个具体切入口进行突破?此前,瑞立视就曾透露过RTS Active的存在,那瑞立视会发布RTS Active会对大空间产生什么影响?是价格还是效果?


瑞立视此次的发布会不同,除了大屏幕前的舞台外,旁边还搭建着一个大约50平的类似大空间绿幕场地,支架上方前后搭配了共24个RTS 4000,一个50平的空间为什么要搭配这么多的摄像头? “现场稍会会进行演示,具体的敬请期待。”工作人员表示。

 

除了布满摄像头的大空间外,绿幕前方还设置了一个用于放置摄像机拍摄的滑轨,前前后后有3个工作人员,后台操作的人员有4个。大会受天气影响延迟了开始时间,工作人员也没有闲着,开始检查起设备。一个身着绿幕服的工作人员在与旁边的导演在嘀咕着具体的动作。

 动捕行业现状如何,VR是唯一的应用场景? 


随着雨水渐渐淡去,嘉宾们也陆续进场,原本稀疏的人群渐渐密集起来,位于我身后从事线下娱乐的壮汉和四周的朋友开始讨论起影视制作方面的话题。 

大会正式开始,中国通信工业协会副会长执行秘书长李杨上台分享了瑞立视近年来的成就和动捕事业的发展前景。而回顾瑞立视近年的发展,我们能发现其与VR的发展称得上亦步亦趋。 


在2015年底成立初期,瑞立视就建立了游戏团队和RTS研发团队,并曾经推出《达尔文计划》等VR PVP射击游戏。2015-2016年的2年期间,瑞立视一边开发游戏,一边开发RTS光学定位设备。也曾在2017年在重庆创办线下VR娱乐品牌超现实VR乐园。这一系列的动作和布局让我们在潜意识将瑞立视和VR大空间紧紧的联系在一起。 “瑞立视成立当初就是看中光学动捕定位方案在传统动捕需求和VR新行业需求中占据一个平衡的中心位置并且存在着市场空白。” 

近些年,我们能很明显的看到国产动作捕捉技术在迅速的发展,除了瑞立视外,诺亦腾、国承万通、青瞳视觉等等厂商时不时都会对公布最新的技术信息。 各厂商使用的光学、激光、惯性等不同原理的技术在国内的各个领域都有了相关的应用。线下娱乐、医疗、文旅、虚拟偶像、CG制作等各个垂直领域,但是与海外相比,国内总体水平仍是有着较大的差距。 

毕竟海外的动捕技术早在二三十年前便已经出现和落地,在影视动画这方面应用形成了十分成熟工业体系,演员的动作捕捉、表情重现等等都有相应的设备,相应的技术人员进行拍摄、后期加工等等。正是如此,国内知名的影视特效团队在设备的选择上会更多的倾向于海外,英国的VICON、美国的魔神和OptiTrack几乎成了动捕技术的头部垄断。 在这样的市场环境下,国产的动捕技术在影视动画以及内容制上尚未形成良好的闭环体系和合作形式,自然对发声就稀疏了许多。 

(PS:洛克特曾参与近段大火的《哪吒》动漫、《新喜剧之王》、《美人鱼2》、《扶摇》等作品的特效制作)


“国内影视制作采用的技术设备主要来自国外厂商,而这些设备动辄几百万甚至上千万元,成本非常高。此外,由于国内了解相关技术的人才稀缺,所以这些设备在现场可能还不好用。”洛克特特效团队CEO聂华军吐槽道,“国内有两套专业的海外动捕设备,一套在北京,一套在香港,而国内会用就那么三个人,而这些人还时常不在国内,还得预约。有时候某个功能这个人不会,要等另一个人回来才能用,这很麻烦。”

 新相机RTS Outdoor和RTS Active, 惊喜,魔方MR拍摄系统  

4点10分,瑞立视CEO许秋子正式上台,从她的演讲上可以了解到其是一个偏向技术型领导者,在简单介绍完动捕技术后,许秋子公布了两款新动捕相机成员:主动光相机RTS Active以及室外光相机RTS Outdoor。 


RTS Active以及RTS Outdoor


顾名思义,与此前的被动光相机系列不同,主动光相机RTS Active与Steam基站的原理基本类似,即通过相机发出的光源来确认关键点的空间位置,不同的是RTS采用的是红外光,这是一款专门为虚拟现实开发的定位产品,该设备需要搭配定制的刚体进行使用。

许秋子表示,Active在视场角、精度、延迟方面与被动光系列相机保持同样的水准,其优势在于:1.支持单相机追踪;2.支持创建上千个捕捉目标物(刚体识别);3.在成本方面会比被动光下降10%—25%,具体要根据空间规格进行判断。 

室外光相机Outdoor是一款针对室外光照环境开发的动捕产品,该设备同样采用的是主动式的系统,其优势在与可以屏蔽强烈的940nm高频太阳红外频闪光源,从而实现室外动捕拍摄、室外VR大空间体验。与Active一样Outdoor同样支持刚体识别,开发者可以通过刚体来模拟具体的场景设备,实现更多元的交互。 现场播放视频来看,影子的颜色能判断测试当天的太阳光强烈程度,测试人员颠球的动作相对较快,但总体的Outdoor实时动作捕捉效果十分稳定,没有出现丢失。 目前官方并没有透露具体的相机价格,在后期的采访中,许秋子表示产品将会以解决方案的形式对外,不会单单出售定位相机。 在讲完了硬件产品后,发布会进入了最核心的阶段——魔方MR虚拟预演拍摄系统。 

魔方MR虚拟预演拍摄系统

起初陀螺君以为瑞立视只会在屏幕上进行视频演示,没想到瑞立视采用现场直播演示的形式进行,场地便是隔壁50平的空间。无论是直播的形式还是拍摄效果都为陀螺君带来了不少的惊喜。 

首先最为直观的便是直播与拍摄的流畅度,其二是虚拟人物与绿幕演员在NCam(虚拟相机)下的稳定性,最重要的是未来在拍摄上的可操作性。 先抛开稳定性。从技术上看,相对于此前的二维抠像,再通过三维空间坐标系的实时抠像技术与实时合成的方法。魔方MR系统让所有的人机交互合成在拍摄同步进行,而且交融性很高,不会让人有一种突兀的感觉。 而这归功NCam虚拟相机功带来的交互性,这完全区别于往前的“前后叠加”。现场导演使用NCam进行手持平移拍摄时,在画面和人物动作上十分稳定而且没有位移的情况,值得注意的是,当手持摄像头移动到绿幕演员的背后,镜头拍向非观众席时(非绿幕场景),画面却自动屏蔽掉(视频中有所体现),而镜头仅捕捉到了绿幕演员一人。

 

那么在这个前提保证下,拍摄剧组便可以根据需求进行自由运镜,获取理想的构图与影片走向。 该系统除了RTS光学空间定位系统、RTS全身动作捕捉系统、绿幕实时抠像系统、RTS NCam虚拟摄像机系统外,还包含了虚拟数字内容3D合成软件(后期制作)。 

据悉,后期的3D合成软件包含了多种视频流实时处理,色键器,UE合成,相机运动轨道输出,以及前面提到的三维空间屏蔽等等。剪辑工具除了支持整个剧组的整体运镜并直接调整3D布局外,后期工作人员还可以通过该工具直接输出Layout布局进行深度数字绘景等二次处理加工。 为了了解该系统对后期的作用,我询问了洛克特特效团队后期成员,其表示,“从我们后期的角度来看,主要是得看这款后期处理软件与我们平常所使用的软件例如Maya、Nuke在兼容性上使用,如果能满足多种跨平台操作,那这就很牛逼了。光前面的的三维空间屏蔽功能,就能在许多复杂的拍摄环境下起到非常多作用。” 据工作人员的表述,魔方MR系统满足输出兼容。但具体的工具间的兼容性还有待认证。 “在此前的工作经历(日本VR主题乐园策划)中,自己深深扎根在整个拍摄的全过程,从剧本到镜头框架到成本评估…再到整个后期的运转,让我能了解到整个流程的需求。”许秋子走到绿幕棚前讲解到。“通过交互可视化镜头实时掌握每一个镜头的元素和具体的效果,再进行后期工作的成本预估,安排。整套系统能满足剧组对构想和现实拍摄的贴切度判断,片子预演一步到位,降低沟通和修改的成本。”

那么对于特效团队这种对画面细节有着高要求的群体来说,这套设备会起到这么大的效果?

 影视应用

聂华军表示:“从原理来看,这是与好莱坞同步的体系,刚才的实时效果确实让我有些惊讶,对精准度来说,起初的预期并没有这么高,但是这个已经能很好满足我们的需求了,后期的工作自然需要与别的工具进行同步操作,只要支持格式的基础就满足需求了。此前我们用的都是海外的产品,那以后使用国产的产品在成本方面就能有很好地保证了,相信可以提高3倍到4倍的工作效率。我们之所以将团队移到深圳,就是相信深圳的硬件水平。”

关于动捕的应用,其补充到:“动捕运用于VR大空间只是一个方向,目前国产动捕在内容制作上表现平庸,一方面是国人没有进一步去接触,另一方面是成本问题。但以后随着游戏产业、影视产业、虚拟偶像和国漫产业的发展,那么动捕在内容制作上将会非常大的爆发。” 许秋子表示:“目前市场的趋势变化,抖音、主播直播、网红电商等方面都有很多互联网短视频的制作需求,都需要有创意、短平快、高效率的视频制作方式,这个系统也是瞄准了这样的市场需求趋势的,而我们不光是考虑卖设备,我们会在全国各地组建虚拟摄影棚,对客户进行租赁和服务性质的商业模式。”

 许秋子:业务仍围绕文创、教育、军工, 月项目达8-10项 

在专访中,陀螺君抛出开头时提到的疑问“从去年的Steam 2.0大空间方案再到下半年即将发布的Oculus Quest一体机大空间啊方案,整体的VR大空间市场竞争是十分激烈的,瑞立视在VR方面的竞争力哪里?” “其实这些年,我们都有在强调瑞立视是一个基于动捕技术的多媒体科技公司,VR只是我们其中的一个方向,在VR方面我们是一个以解决方案输出的形式在进行,从技术来看,我们动作捕捉相对于其他厂商而言,有着自己的竞争力一方面是精度,另一方面是全身全方位动作的捕捉。当然,不是所有厂商都需要这种高沉浸的效果,所以我们推出了Active这款产品,这款产品能减低整个方案在硬件和搭建的成本,同时我们也在简化设备来提供更低成本的方案。那如果是在影视与动漫制作上,瑞立视的优势便不言而喻。瑞立视一直专注B端和G端的市场,在这方面我们长时间耕耘和积淀其实在竞争上并没有压力。”许秋子补充到,“当然我们并不是只推出大空间的一款产品,我们有其他的一些项目,我更多是做整个场馆搭建,只要是和数字媒体相关的我们都有在打包成整体的数字方案去做。” 

“瑞立视主要业务围绕文创、教育、军工三个方面,基本上每个月都有8-10个项目,今年瑞立视光文旅+科技展馆就已验收20个项目,在最近就签了一个近千级别的项目,这个项目是与5A级旅游景区合作的项目,项目包含了整层楼的沉浸式搭建。当然,这项目并不只有大空间,也有我们其他的沉浸项目。” “今年下半年,瑞立视会主要围绕着产教融合进行,我们近端时间完签了两所学校的产教融合项目,这段时间学生也差不多快开学了,所以我们会把重点放在这一部分,让项目具体整个推动起来。为此我们专门创建了20多号人的产教融合部门。除了产教融合部门,我们还有很多其他项目组,像刚才说的文旅文创项目,我们会以这些项目对学校进行项目式教学,让学生学习商业项目的制作流程。这些部门之间进行融合,互相加持,持续不断的推动各项目的进展。”…

其实不管是从产品的定位还是公司整体的战略,瑞立视一直没有把自己受限于VR大空间解决方案的领域中,而是将自己定位成行业数字媒体解决方案应用的总提供商。瑞立视CEO许秋子近两年一直主推文创,教育和军事领域,而目前瑞立视的大多数客户也都是来自此类行业。这需要团队不断去挖掘和分析行业客户的需求,从而才能将整体的软硬件解决方案整体输出并让客户对解决方案满意。包含许秋子刚才透露文创项目以及产教融合的项目也恰恰正是说明针对文创以及教育产业版块,而此次公布的魔方MR系统似乎预示瑞立视在向B端影视内容制作领域扩展。 

结束访问后,在等雨变小的过程,陀螺君与一名从事内容开发的工作者老隋攀谈了起来。

“我觉得很惊喜,瑞立视魔方MR很多功能新功能给我带来许多可操作性的空间,比如虚拟偶像直播、游戏CG制作、真人秀的形式等等。当然目前还没尝试过这样的系统,单从今天公开的画面效果来看,我觉得足以满足目前市场中低端的需求,特别是在效率上。而剩下的问题就是成本和操作细节的问题。”