https://arxiv.org/abs/2104.01027
Robust wav2vec 2.0: Analyzing Domain Shift in Self-Supervised Pre-Training (Wei-Ning Hsu, Anuroop Sriram, Alexei Baevski, Tatiana Likhomanenko, Qiantong Xu, Vineel Pratap, Jacob Kahn, Ann Lee, Ronan Collobert, Gabriel Synnaeve, Michael Auli)
asr 프리트레이닝으로 domain shift 태클하기. 일단 어노테이션이 없더라도 타겟 도메인의 데이터를 많이 많이 모으는 것 자체가 중요해진 시점.
#pretraining #asr