文 | VR陀螺 云吞 一个爱电影、爱撸猫的小姐姐 一千个人对VR有不止一千种理解，但归根结底，对真实世界的无限逼近和模拟是VR很为重大的使命之一。 而有一间叫做OTOY的公司，又把“让VR世界和现实世界难辨真假”当成了自己的使命。云渲染、真人面部捕捉、光场传输、6DoF视频……OTOY的VR版图正在以难以想象的速度扩张。 2017年，在VR面临前途未卜的分岔路口之际，OTOY在VR上的野心，很有可能会在业界掀起一场革命。 特效、引擎、3D格式、VR全面开花 成立于2009年的OTOY，从一开始的目标就是为电影工作者、3D设计师、动画师、游戏开发者提供实时、电影级质量的3D图像服务。到目前为止，OTOY已经在捕捉、渲染和流式传输方面推出了多种服务，力求提高生成图像、处理图像、分发图像过程的效率，同时确保图像有着极高的质量。 公司在成立之初，就展示了一项划时代意义的产品：LightStage面部扫描技术。这项技术来源于USC-ICT（南加州大学创意科技学院）的两位学者，可以对人脸进行进行极为精细的捕捉和数字重现。OTOY在买下这项技术后，在后期增添了自己的算法，随后就实现了商用化，并且在好莱坞占领了一席之地。工业光魔、数字王国等特效公司纷纷采用LightStage，用于电影和电视剧中的特效制作。 比如在《复仇者联盟》中，绿巨人变身后的形象就需要用LightStage来事先捕捉演员原本的面部特征和动作；在《本杰明巴顿奇事》中，由于电影讲述了男主角返老还童的故事，也运用了LightStage来展现同一个演员从老年到儿童的外貌改变。 在2011年时，OTOY收购了新西兰软件公司Refractive，将其旗下的Octane渲染器收入囊中。Octane是首款以显卡GPU作为运算核心的渲染器，渲染速度极快，被广泛应用于电视电影及商业广告大片的制作中。相比基于CPU的渲染，基于GPU的渲染可以花费更少的时间来完成十分出色的作品，达到10～50倍的速度提升。Octane渲染器速度快而且可交互，能实时获得渲染结果。 Octane很好的广告莫过于前段时间大热的HBO美剧《西部世界》的片头——这个无比诡异、精致、如照片般写实的视频就是由Octane渲染而成。 随后，公司又推出了自研的Brigade游戏引擎。Brigade采用了更先进的路径和光线实时追踪技术，将游戏画面渲染得更加逼真。同时，Octane和Brigade都是基于云端的工具，相当于有20000个GPU在同时工作，开发者并不用担心自己的计算机运算能力过低。 而为了让3D图像更加逼真、更易于传播，OTOY在2014年推出了3D格式技术.ORBX，试图让这一格式在3D格式中如.JPG那样流行。不同于普通的3D格式.OBJ与.FBX，.ORBX格式能够涵括所有3D相关的信息，包括高端3D场景中的灯光、物理渲染、材质等等，这些细节信息能够做到“能像氢原子的四分之一那样细微”。 除了ORBX格式，OTOY还专门推出了ORBX媒体播放器，可以用于播放3D视频。目前ORBX媒体播放器可以直接在Gear VR中的Oculus Social社交应用中使用，多个用户可以一起在播放器上观看3D视频。 在3D领域拥有众多研究成果的基础上，进军VR成了自然而然的事。2015年3月，就在Rift和Vive面世的同时，OTOY发布了OctaneVR，专门用于渲染VR、AR和全息影像。OctaneVR的目标是帮助开发者创造能够满足消费者级别VR头显要求的优质内容，并且免费提供给商业用途的开发者。除此之外，ORBX媒体播放器也能够实时传输VR内容，和WebVR相结合真正做到了VR内容的一键分发。 用光场技术打通与巨头合作 很终，OTOY也开始攻坚AR/VR中的圣杯——光场。公司联合创始人兼CEO Jules Urbach将光场技术称为“虚拟现实发展的最终奥义”，是虚拟现实技术很终的难题。光场也吸引了众多AR/VR企业进行大力研究，比如狂揽10亿美金的Magic Leap的“光场成像”，以及烧了投资人2亿美金来研究光场相机的Lytro。 OTOY对于光场的研究重心放在如何用数字来记录所有光线在一切现实和虚拟物体上的反射，并且能够在后期对这些数据进行渲染和传输。鉴于公司已经有了捕捉、渲染和流播放的生态，光场技术与这三个领域的结合让OTOY得以牵手Unity、Facebook和HBO等游戏、VR和影视行业的巨头，共同探索如何呈现照片级真实的画面。 在2015年5月，OTOY宣布成功捕捉到一个包含光场数据的VR场景。公司在当时使用了特制的佳能单反相机和GoPro相机矩阵，并通过后期复杂的算法渲染出了具有深度信息的、可在其中移动的VR视频。 而在今年的Facebook F8开发者大会上，Facebook宣布将会和OTOY合作打造 全新的容积相机（Volumetric Camera System）系统，能够实现容积视频捕捉。所谓的容积视频，是指捕捉到的视频具有深度信息，和普通的360度全景视频有着本质区别。 这一相机系统使用了许多技术来提取图像中的景深信息，然后生成一个像泡泡一样的球形空间，观众可以通过VR进入这个空间内，从各种不同的角度来观看不同的风景，也就是可以在视频中实现6DoF。这对目前的全景视频和VR视频来说是变革性的进步。 OTOY为此打造了一个工作流程，确保6DoF视频从捕捉、到后期制作、到发布都可以在云端进行简单的操作。在视频被捕捉之后，可以直接上传至云端，生成ORBX格式的3D文件。随后开发者可以在电脑上下载这些文件，并且使用Adobe Ae、Nuke或者Unity等25个含有Octane渲染器插件的后期制作工具来对视频进行处理。 Octane 本身采用了光场渲染的方式，可以渲染高达上亿道光束群。因此容积视频中不同层次的图像和光影也可以在后期被分离随、调整。这相当于将CG的制作模式用于容积视频的后期制作上，但工作流程的复杂度被大大减小。同时，由于Unity和Unreal引擎均支持Octane，因此游戏开发者也可以将捕捉到的6DoF视频用来制作VR游戏。 很后，在光场的传输和压缩上，OTOY也取得了突破性的进展。光场虽然能够捕捉到大量细节，但同时也会造成文件过大的问题。即便是仅仅追踪一个物体,对其收集并存储高精度全细节的光照信息也会是相当大的数据量,而通过现有的数据传输方式很难实现数TB大小的视频播放。 OTOY在压缩算法上使用了类似“视网膜凹式渲染”（Foveated Rendering）的技术。OTOY的光场播放器只加载它预测用户视角将会转向的区域数据，大大减小了运算的数据量。目前这一技术已经可以做到对一个单物体的光场，传输速率达到了1.5Mb/s，在智能手机上也能够流畅观看。 公司的视野甚至已经扩展到AR和MR领域。在今年的GDC上，OTOY联手Unity为ORBX媒体播放器推出了光场流播放功能，这意味着在手机上就可以直接观看MR视频，且从demo来看十分流畅。 OTOY现阶段还正在和AR眼镜制造商ODG合作，试图将该技术移植到AR眼镜上。ODG眼镜上的3D相机在OTOY的LightStage技术的推动下已经可以捕捉全光照阶段的影像，并且使用OMP媒体播放器来处理帧。眼镜捕捉到的影像还能够直接导入Unity，生成VR或者MR内容。 估值超3亿美元，它会成就VR的梦想吗 从LightStage到3D格式，到云渲染再到光场，OTOY所押宝的每一项技术可以说都十分符合科技进步的方向，彼此之间也有着千丝万缕的联系。这种联系使得这些技术得以相辅相成，在不断的交互之中碰撞出更大的创新的火花。 CEO Urbach对于VR和AR则有着更为远大的梦想——他希望OTOY可以很终实现《星际迷航》中的“全息甲板（Holodeck）”。全息甲板一直被称为是VR的最终形态，场景随着用户转头的角度而变换，实现场景预渲染和实时渲染。OTOY一直致力于提高VR和AR视频的渲染速度。而OTOY的Octane渲染器比传统渲染器快10到40倍，有助于实时渲染场景和环境，同时可借助亚马逊网络服务( AWS)等云端服务器实现远程渲染。再加上光场技术在捕捉端和渲染过程中的应用，就可以营造出难辨真假的虚拟场景。 OTOY前进的方向也受到了业内的认可。公司董事会成员都是业内名气如雷贯耳的大人物，包括谷歌母公司Alphabet的执行主席Eric Schmidt、IBM前主席、首席执行官和总裁Samuel Palmisano、全球顶尖经理人公司WME/IMG的联合CEO Ari Emanuel、以及著名经济学家George Gilder。 公司主要股东包括全球很大的数字设计软件公司Autodesk，曾注资Facebook的风险投资家Yuri Milner，以及很近对公司做出投资的HBO和Discovery等。据《纽约时报》报道，OTOY已融资超过1亿美元，目前估值超过3亿美元。 尽管相比许多科技巨头，OTOY的规模只是小巫见大巫，但公司的技术毫无疑问推动了VR在视频、游戏、影视等行业的发展，这也让OTOY得以在VR行业占有一席之地。 2017年对于OTOY来说是重要的一年。公司除了和Facebook、Unity引擎有着更为深入的合作外，还将会在主流的VR头显如PSVR、HTC Vive、Oculus Rift上实现位置跟踪的光场技术。已经走到了岔路口的VR，有望在OTOY的助推下，迈上一个新的台阶。 关注微信公众号：VR陀螺（vrtuoluo）,定时推送，VR/AR行业干货分享、爆料揭秘、互动精彩多。