VRで注目、新技術「NeRF」の衝撃 様々な視点の画像を美しく合成

複数の視点の画像から、新たな視点の画像を合成して作り出す「Novel View Synthesis」というタスクがある。VRやスポーツの自由視点映像などには不可欠な技術だ。この領域で驚異的な性能を発揮したのが「NeRF」（ナーフ）。果たしてどんなアルゴリズムで、美しい合成画像を作り出せるのか。世界中の研究者や技術者に衝撃を与えたその技術を、論文からひもといていく。 まずは下の3枚の画像を見ていただきたい（図1）。左の2枚の写真を基に、一番右の画像のような新たな視点の画像を生成する技術を、今回は紹介していく。コンピュータービジョン分野やコンピューターグラフィックス分野の主要な研究課題の1つであり、応用先にはVR（仮想現実）やスポーツの自由視点映像など、様々な分野が挙げられる。 これは「Novel View Synthesis」という、複数の視点の画像を手がかりに新たな視点の画像を合成する技術

[saigon99]

なんとなく、なんとなくなんだけど「ネルフ」って読んじゃったの。

[napsucks]

すげえな。これとか　https://youtu.be/yPKIxoN2Vf0 もはや”building Rome in a day”の時代から隔世の感がある。

[misochige]

ナーフされそう

[hobbiel55]

「十分に発達した科学は魔法と見分けがつかない」賞をあげる。

[misshiki]

“NeRFはNeural Radiance Fieldsの略語であり、その名の通り輝度を出力する「場」をニューラルネットワークにより表現したもののこと”

[pikosounds]

この技術があればMSフライトシミュレーターのランドマークが充実しそう。

[kei_1010]

素晴らしい。他の技術と組み合わせれば、写真からほぼ完璧な3Dモデルが作れるようになるだろうな。そうなればゲーム開発などのコストが大幅に下げられる。Google Earthに導入された未来とかも想像するだけでワクワクする

[localhost0]

今までの3Dレンダリングの常識がひっくり返るな…

[dimitrie]

インセプションの世界/ベイルートの大爆発とか多数の視点で観測されたものを検証可能にできるのかな

[nghrk]

これは人類補完されますわ

[ornith]

“複数の視点の画像を手がかりに新たな視点の画像を合成する技術”

[dame_maru]

深層生成なのかな？面白い

[mr_mayama]

ノベル・ビュー・シンセシス、SAOみがある

[jamesbjp]

Google Street Viewが滑らかになりそう

[kalkwater]

おもしろ！有料部分読めてないけど通常の動画からホログラム的な立体動画作ったりとか目指すのかなあ

[asyst]

すごい

[otihateten3510]

これは割とビジネスの匂いがするね

[iwtn]

ほう、これは特定の分野で非常に役に立ちそうですね… VRにおける現実からのデータ取り込みが捗りそう。

[maturi]

つ　六角大王

[yarumato]

“複数（数十枚から数百枚）の視点の画像を手がかりに新たな視点の画像を作る技術Novel View Synthesis。独創的アルゴリズムで驚異的な性能を達成する手法NeRF”