https://arxiv.org/abs/2302.04871
In-N-Out: Face Video Inversion and Editing with Volumetric Decomposition (Yiran Xu, Zhixin Shu, Cameron Smith, Jia-Bin Huang, Seoung Wug Oh)
gan이 아직 살아남은 분야가 3d 얼굴 생성이죠. 여기서는 inversion을 할 때 잘 안 되는 이유를 ffhq 밖으로 나가게 하는(ood) 요소들, 예를 들어 메이크업 같은 문제에서 찾고 있네요. 그래서 이런 ood 요소를 in domain 요소와는 따로 모델링한 다음 composite 하는 방식을 취했습니다. mode coverage 문제를 이렇게 해소하네요.
https://in-n-out-3d.github.io/
#3d_generative_model #gan_inversion