详细介绍如何使用 NeRF 进行 3D 体积渲染-附源码下载

介绍

在此示例中，我们展示了 Ben Mildenhall 等人的研究论文 NeRF：将场景表示为用于视图合成的神经辐射场的最小实现 。等人。作者提出了一种巧妙的方法，通过神经网络对体积场景函数进行建模来合成场景的新颖视图。

为了帮助您直观地理解这一点，让我们从以下问题开始： 是否可以向神经网络提供图像中像素的位置，并要求网络预测该位置的颜色？

图 1：给定图像坐标的神经网络
作为输入并要求预测坐标处的颜色。

假设神经网络会记住（过度拟合）图像。这意味着我们的神经网络将在其权重中对整个图像进行编码。我们可以查询每个位置的神经网络，它最终会重建整个图像。