NeRF：今年最火的AI技术

嘿，朋友！最近是不是也被NeRF这个术语包围了？别担心，我来为你解密这个炙手可热的AI技术。NeRF，Neural Radiance Fields，2020年就横空出世，大获全场好评。它的能力？说简化点就是用一堆二维照片就能还原三维世界，比你的大脑解构三维空间还要6！你是不是觉得像魔术？别急，背后的逻辑很简单，就是让神经网络去“想象”空间。

想象一下，你用手机拍了一堆照片，NeRF就能帮你在任何角度“看”这个场景，视角随便你变，清清楚楚。这种技术一出，各行各业都抢着要。比如，电子商务想让你在家就能“走进”商品，游戏行业想给你更真实的沉浸式体验，甚至连房地产也想让你在买房前“看房”。

这么神吗？当然还有更酷的！比如能把人像虚拟化，修复老旧照片，甚至还能把二次元画作“变身”三维。你是不是已经开始想怎么应用到自己的项目里了？

这下你明白了吧，NeRF不只是个技术名词，它是通往现实中的“全能观察者”的一阶，想想这些可能，你是不是也想试试这把“神笔马良”？

转载： https://mp.weixin.qq.com/s?__biz=MzIxOTczOTM4NA==&mid=2247549727&idx=2&sn=c59e18cb2bd8dfe34eafdc6e7cf9f4fd&chksm=97d4e688a0a36f9ea0ed4c5a988a3802b4e9265655c5c0a6f208a396860f3842abae9be3a9a3&scene=27

什么是NeRF？

NeRF（Neural Radiance Fields）是最早在2020年ECCV会议上的Best Paper，其将隐式表达推上了一个新的高度，仅用 2D 的 posed images 作为监督，即可表示复杂的三维场景。一石激起千层浪，自此之后NeRF迅速发展起来被应用到多个技术方向上例如新视点合成、三维重建等等，并取得非常好的效果，其影响力是十分巨大的。

NeRF其输入稀疏的多角度带pose的图像训练得到一个神经辐射场模型，根据这个模型可以渲染出任意视角下的清晰的照片，如下图所示。也可以简要概括为用一个MLP神经网络去隐式地学习一个三维场景。

NeRF有哪些应用？

NeRF最先是应用在新视点合成方向，由于其超强的隐式表达三维信息的能力后续在三维重建方向迅速发展起来。接下来介绍下NeRF的几个主流应用方向。

新视点合成（View Synthesis）

项目主页：https://www.matthewtancik.com/NeRF

物体精细重建

项目主页：https://jonbarron.info/mipNeRF360/

城市大场景重建

项目主页：http://waymo.com/research/block-NeRF

人体重建

项目主页：https://zhaofuq.github.io/humanNeRF/

3D风格迁移

http://intelligentgraphics.net/StylizedNeRF/paper.pdf

镜面反射场景重建

项目主页: https://bennyguo.github.io/NeRFren/