把你的照片变成 3D 场景视频

最近做 PV 的时候遇到了个小问题。曲绘给我的背景图是一张没有分层的图片,这样在做摄像机移动时感觉就像把图片放大缩小平移,灵魂都掉了。不过我发现了一个神奇的 AI ,可以把静止图片变成 3D 场景视频。结合 AE 的 3D 摄像机追踪就可以完美解决这个问题啦。

另外如果你有什么珍藏的照片也可以放到这个 AI 上试一下,把你珍贵的瞬间变成3D视频,万一效果不错呢,反正我已经爱上这玩意了。

这个项目是 3D Photo Inpainting。想要尝试的话照常可以去橘子的实践时间瞧瞧。

先展示一下效果

输入图片:

输出视频:

输入图片:

输出视频:

了解更多请访问 3D Photo Inpainting 项目主页

关于 3D Photo Inpainting

3D Photo Inpainting 是一项基于内容识别修复3D相片的技术。它通过输入 RGB-D 图像将照片 3D 化。项目还使用 MiDaS 来预测深度图 (Depth Map),这使我们可以使用单张普通相片实现 3D 化(虽然 MiDaS 预测效果一般)。

有关内容识别修复照片的技术其实并不少见,包括我们的去水印工具、PhotoShop 中的内容识别填充都使用了类似的技术。

3D Photo Inpainting 将这项技术应用于 RGB-D 图像,通过上下文感知来填补运动视察造成的空白区域,从而做到将照片转化为 3D 场景的视频。