https://arxiv.org/abs/2007.08100
Towards Debiasing Sentence Representations (Paul Pu Liang, Irene Mengze Li, Emily Zheng, Yao Chong Lim, Ruslan Salakhutdinov, Louis-Philippe Morency)
문장 representation에 대한 debiasing. 일단 bias가 반영될 수 있는 단어들을 선정한 다음 코퍼스에서 이 단어들을 서로 대체한 데이터를 생성. 이 코퍼스의 representation에 대해 pca로 bias를 반영하는 컴포넌트를 찾아냄. 결국 이 문제는 인과추론의 관점이 필요하다는 생각이. #nlp #bias