[Point Review] Renderable Neural Radiance Map for Visual Navigation
- Encoder에서는 이미지로부터 만든 feature map을 3D로 올리고 RNR-Map 상의 동일한 (u,v)를 가지는 feature들을 average하여 latent code를 만듬.
- 이 때 feature의 개수를 저장하여 이미지가 추가될 때 마다 계속 average하여 업데이트
- Decoder에서는 GSN의 구조를 따라 floorplan으로부터 neural rendering을 하여 이미지를 reconstruction 하도록 학습
글 재미있게 봤습니다.