https://arxiv.org/abs/2104.03416
Pushing the Limits of Non-Autoregressive Speech Recognition (Edwin G. Ng, Chung-Cheng Chiu, Yu Zhang, William Chan)
큰 모델과 프리트레이닝으로 lm 없이 ctc 모델의 한계밀기. 그럼 1 빌리언 파라미터의 맛 좀 쬐끔만 보거라!
#non-autoregressive #pretraining #asr #ctc