https://arxiv.org/abs/2304.02602
Generative Novel View Synthesis with 3D-Aware Diffusion Models (Eric R. Chan, Koki Nagano, Matthew A. Chan, Alexander W. Bergman, Jeong Joon Park, Axel Levy, Miika Aittala, Shalini De Mello, Tero Karras, Gordon Wetzstein)
오...저는 이 정도 퀄리티의 single/few image view synthesis는 처음 보는 것 같네요. 이미지 입력을 임베딩하고 이 임베딩으로 rendering, rendering 결과를 diffusion model로 denoising 하는 구조입니다.
https://nvlabs.github.io/genvs/
#nerf #ddpm