
—— 青亭网

Esther|编辑
近年来,容积摄影技术在MV拍摄、体育赛事直播、3D医疗模拟等领域得到不断应用。与全景摄影不同,这项技术利用大量摄像头,从多个角度捕捉摄影棚中的目标任务和场景,可生成和输出动态3D影像和模型。因此,利用容积摄影技术,可拍摄6DoF VR视频,或是可多角度查看的AR表演。
实际上,容积摄影也可以用来制作2D视频,与传统视频拍摄方法相比,容积摄影的好处是捕捉到3D立体的数据,可在后期随时调整镜头角度,甚至也可以让观众自由切换观看角度。
近期,这项技术又应用在了一部低成本恐怖电影《Demonic》中。据悉,该片是一部超自然主题的恐怖电影,导演是Neill Blomkamp。Blomkamp为了降低该片的拍摄和特效成本,决定采用低成本容积摄影方案来拍摄影片中的梦境特效,整个制作和拍摄过程仅24天。
据青亭网了解,《Demonic》讲的是主人公Carly在一场实验中,曾使用VR技术体验许久不见的母亲的梦和记忆,并希望从中找出与这些内容与母亲的关系以及隐藏的秘密。
实际上,在这部电影中“恶魔”存在于VR中,它更像是通过VR来控制人的大脑。而就像很多恐怖片一样,《Demonic》也有一段“驱鬼”场景,为了降低这段场景的拍摄和特效成本,Blomkamp采用了容积摄影技术,利用该技术甚至还能解决疫情期间难以聚集拍摄的问题。换句话说,就是利用容积摄影和3D建模,来取代电影的后期特效。
《Demonic》的特效也就是容积摄影部分是由Peacemaker Filmworks工作室制作的,该工作室此前曾参与制作《死侍2》、《超能敢死队2021》等电影。
Peacemaker的容积摄影棚配备了260个低成本运动相机:小蚁4K运动相机(Yi 4K),亚马逊售价129美元起。此外还配备索尼IMX377传感器,虽然没有电影级相机那么高清,但足以捕捉到大量3D细节。
其具体拍摄流程是:对电影演员进行360°动捕和3D重建,然后利用Unity引擎来渲染影片的3D场景。将3D动捕的演员与虚拟场景结合后,再在场景利用虚拟摄像头来拍摄2D电影画面。这种形式类似于《狮子王重制版》等电影采用的虚拟拍摄和运镜技术。
当然,利用3D场景在拍摄过程中也存在一些困难,比如需要精确的测量场地和设定移动路线,才能将捕捉到的演员动作与渲染的虚拟场景匹配。因此,Peacemaker在拍摄场地的墙壁上贴了一条一条的黑色贴纸,来为了帮助AI定位摄像头和场景,并进行匹配。
有趣的是,摄影棚中每两台相机为一组,目的是为了通过三角测量法来计算出3D距离。利用这些距离数据,便可以在后期实现3D抠图,取掉绿幕等不必要的内容,从而生成更干净的3D模型。此外,利用距离数据,还生成了基于拍摄目标的点云模型,点云数据可省去大量后期特效时间,直接渲染人物的服装、毛发。也就是说,容积摄影的一大优势是,可捕捉演员身上完整的色彩和纹理,包括妆容、服装等等。
在拍摄完成后,后期会在电脑中匹配所有摄像头的全局位置,然后根据每组摄像头捕捉的距离数据,生成整个房间的深度地图,接着生成整个场景的点云数据。(注:点云指的是某个坐标系中的点的数据集,在容积摄影中也包含了每个点的RGB色彩数据。这其中,每三个点可生成一个多边形,然后再利用AI算法,来进一步提升3D模型的纹理。)
值得注意的是,电影的容积视频部分是用静态摄像头拍摄的,而在电影中,为了呈现主人公的第一人称视角,还需要将拍摄画面调整成跟随头部运动而变化的动态视角。
尽管Peacemaker容积摄影工作室采用成本较低的相机,但二百多台相机产生的大量数据意味着需要较高配置的CPU和内存。据了解,该方案采用200多个CPU核心、100 TB内存硬盘、可同时拍摄920K像素,每秒可拍摄30次。同时,在每秒可捕捉9.5万亿像素,每帧图像包含700到1400万多边形。
另一方面,考虑到整个容积摄影方案所在的场地直径达5米,如果演员距离摄像头较远,就难以捕捉到一些细节,因此更适合拍摄远景。而为了拍摄细节更丰富的近距离镜头,《Demonic》团队采用了一个规模更小的容积摄影装置,用于近距离捕捉演员,摄像头与人之间的距离大约30厘米左右。
与此同时,为了进一步提升图像的分辨率,电影制作团队还训练AI,将捕捉到的4K影像提升至8K分辨率的观感。
尽管如此,容积摄影的清晰度还不能达到好莱坞动画电影的水平。好在考虑到电影的恐怖情节,一些像素的跳动和不准确,反而与电影情节足够融入。此外,《Demonic》还采用具有颗粒感的点云数据来模拟VR与真实场景之间的过渡。
总之,《Demonic》展示了容积摄影在传统电影拍摄中的应用潜力,尤其是取代或补充后期特效的可行性,以及降低时间和资金成本优势。据悉,Peacemaker此前曾获得Epic Games投资,后者曾采用容积摄影技术来制作Travis Scott虚拟演唱会,比3D建模更省钱和时间。除了演唱会、电影外,还可以用于医疗、军事等场景。
参考:
https://mixed.de/neill-blomkamps-sci-fi-horror-demonic-spielt-mit-vr-technik/
( END)