【AI产品】 基于深度估计如何后期调整景深,看AppStore神器Focos就知晓
欢迎来到《AI产品》专栏,这一个专栏是面向所有对人工智能技术感兴趣的朋友。在这个专栏里,我们会给大家推荐好玩的AI产品,剖析背后的关键技术,并推荐相关学习资料。
今天要推荐的这款产品是Focos,这是一款基于深度估计的后期对焦和景深编辑软件。
作者&编辑 | 言有三
Focos
Focos可以实现先拍照后对焦,实现景深的任意编辑,连续两年获得AppStore精选推荐。它在最初的时候利用iPhone的多镜头设计,在拍摄时得到3D模型,后期进行编辑合成景深效果,还可以添加模拟光源照明。
升级后的2.0版本支持对任意的照片进行景深模拟,不限定于iPhone拍摄好的照片。
接下来我们就体验一下它的强大吧。首先,我们还是试试iPhone相机拍摄的照片,它有原始的景深数据,应该会更加精确。
第一幅就是原图,第二幅就是改变了景深的图,第三幅是深度估计图,第四幅就是目标热图。深度信息还是很明显的吧,虽然景深的调节不是很完美。
假如我们做了后期处理,肯定会影响深度的估计,如下图,可以看出左边窗子部分造成了干扰。所以要调整深度,最好是在后期处理前。
接下来我们再看几张单反拍摄的高质量作品的景深调整。
关键技术与推荐学习资料
如果是iphone拍摄的照片,本身有深度信息,而对于任意的图片,Focos中最核心的技术是基于单张图像的深度估计,下面给大家推荐一些学习资料。
https://github.com/nianticlabs/monodepth2
https://github.com/JunjH/Revisiting_Single_Depth_Estimation
https://github.com/Ravi-Garg/Unsupervised_Depth_Estimation
https://github.com/gautam678/Pix2Depth
转载文章请后台联系
侵权必究