[SentenceSimilarity] MTE with BERT Regressor

Machine Translation Evaluation with BERT Regressor (BERT Regressor를 이용한 기계 번역 평가)

 

MT hypothessis 문장과 reference translation 문장을 sentence-pair encoder에 같이 넣는다는 차이점 존재

기존 방법과 마찬가지로 pre-trained된 sentence embedding 사용하나 RUSE와 달리 pre-trained encoder를 fine-tuning 함

DATASET

5,360 instances (WMT-2015 and WMT2016) 90% training,  10% dev.

3,920 instances (WMT-2017) test set. 

 

RESULT

각 metric 점수와 DA human scores의 피어슨 상관계수

 

논문 : https://arxiv.org/pdf/1907.12679.pdf