なーふ

NeRF

NeRF = Neural Radiance Fields

複数視点の画像を入力とし、ニューラルネットワークを用いて光の放射と密度を学習する3次元表現技術です。

詳しい説明

NeRFは、複数の視点から撮影された2次元画像を入力とし、対象物の3次元空間における光の放射と密度を学習することで、任意の視点からの画像を生成する技術です。物体をボクセルやメッシュといった従来の形式で表現せず、ニューラルネットワーク内に暗黙的な関数として保持します。

位置と視線方向を入力すると、その地点のRGB値と体積密度を出力するようにネットワークを学習させます。この仕組みにより、写実的で高品質な新しい視点の画像や動画を、学習済みデータから合成することが可能です。

従来の3次元モデリングとは異なり、ニューラルネットワークそのものが3次元表現を学習する点が画期的です。G検定では、生成AIやコンピュータビジョンの最新技術として、画像合成の文脈で触れられます。