【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH

Lytro公司昨天凌晨推出了首款专业光场摄影机Lytro Cinema,将自家研发标志性的光场技术带到了专业影像制作领域,拍摄的每一帧都可以记录每个像素点的位置和深度信息,将点云可以转化为Mesh模型,每秒可记录300帧及7.55亿RAW信息,导入Nuke等后期软件可实现调整焦距景深,帧率,由于本来就是记录的像素空间的点云和位置信息,所以可以后期调整视差,快速达到3D立体左右眼视差效果。这将是Lytro宣布放弃消费类相机市场后的第一款专业级产品,Lytro会一直专注于专业级光场产品以及先进的影像技术。

【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH

Lytro光场相机标志着人类相机成像技术的第三次飞跃,第一次是胶片照相机发展到电影机,第二次是当下的数字格式媒介的时代,这一切都是2D数据的存储,那么Lytro光场相机意味着我们记录的格式不仅仅是2D了而是3D数据。

【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH

Lytro Cinema拍摄的序列可以方便的导入Nuke调整其焦距景深,帧率,甚至如果你有能力,可以根据点云算出的Mesh得到World Position还有Normal信息,达到2次打光,精准投射等各种细致加工修改。甚至和Nuke 10的Smart Paint新功能搭配,通过序列计算运动矢量信息,对于素材RotoPaint的制作水准和便利性都达到了一个空前的层次和高度。其实光场相机这项技术你可以简单理解为将CG合成中的Deep Image Compositing技术照进应用到了现实拍摄中。而且序列的点云数据已经得到,摄像机跟踪反求,精度会非常非常高,对于当下如火如荼的VR全景360°视频制作流程来说,全景相机十几路的素材跟踪精度大幅度提高这无疑是如虎添翼。其实不论是实拍还是CG,我们所做的一切都是本质上将上游信息最大化传递至下一环节,最大程度避免返工,将每下一环节后期不可控的问题实现可控,这一切考验的最后是导演和摄影师了。哈哈。

【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH

上面是基于抠像的测试,只需要一块相对干净纯色的背景,拉大焦距让背景变虚,溢色接近于需要合成的新背景,通过景深信息裁切出A通道像Deep合成一样容易合成在新背景上。有了深度信息遮挡问题就轻而易举解决了,但是还有很多东西需要完善,比如半透明物体,烟,玻璃等,细致毛发类物体拍摄的精度。不然会有轻微的抖动,如果后期的修复费时费力这是得不偿失的。物体折射反射高光等物理不可避免的因素都将对于Lytro光场设备扫描拍摄场景的精度质量要求都是一个新的层次,势必衍生出不同的算法去适应不同的材质。

【重磅干货】Lytro发布电影级光场摄影机影响了VFX制作什么?-VFXQH

有朋友问运动模糊怎么解决,已经每秒可记录300帧,电影电视都是低帧率,VFX发展这么久,运动图像的采样分析已经相当成熟,只是效率和优化的问题,所以目前的办法是通过高帧率去缩短采样出运动模糊,其实这些技术的论文研究,早在20几年前的Siggraph上就演示了初期产品。只是成本及其昂贵,无法普及。随着VR时代的到来,需求,环境,硬件软件水平发展到了一个聚集点,这势必会迸发出新的火花。Lytro发布电影级光场摄影机影响了VFX制作不仅仅是后期合成,还影响着前期拍摄等等。以上只是我站在一个后期合成制作的角度理解,大家有见解或者文章有误有疑问欢迎讨论!

延伸阅读:

https://www.lytro.com/cinemaFXpodcast #301: Lytro Cinema

再送上北美VES讲座AR-VR-MR技术剖析。这里面本质的根基技术都讲解了。想直接了解Lytro光场相机发展,请直接观看Part 4。

Part 1
Part 2
Part 3
Part 4

转载请注明转自:VFXQH  作者:李启辉

VFXQH 原创版权所有 · 转载请注转自 VFXQH