[📪정보] Google, 1000개 이상의 언어를 위한 실용적 기계번역 시스템 구축

[익명(1.239)]

[2205.03983] 다음 천 개 언어를 위한 기계 번역 시스템 구축 (arxiv.org)

Google Research Team Builds Practical Machine Translation Systems for 1000+ Languages | Synced (syncedreview.com)

Google 연구팀, 1000개 이상의 언어를 위한 실용적인 기계 번역 시스템 구축

이 백서에서 우리는 1000개 이상의 언어로 번역할 수 있는 실용적인 기계 번역(MT) 시스템을 구축하려는 노력의 결과를 공유합니다.
우리는 세 가지 연구 영역에서 결과를 설명합니다.

(i) 언어 식별을 위한 준지도 사전 교육을 활용하고 데이터 기반 필터링 기술을 개발하여 1500개 이상의 언어에 대한 깨끗한 웹 마이닝 데이터 세트를 구축합니다.

(ii) 100개 이상의 고자원 언어에 대한 감독 병렬 데이터와 추가 1000개 이상의 언어에 대한 단일 언어 데이터 세트로 훈련된 대규모 다국어 모델을 활용하여 서비스가 부족한 언어에 대한 실용적인 MT 모델을 개발합니다.

(iii) 이러한 언어에 대한 평가 메트릭의 한계를 연구하고 MT 모델의 출력에 대한 정성적 분석을 수행하여 이러한 유형의 모델에서 자주 발생하는 몇 가지 오류 모드를 강조합니다.

[익명(27agi2asi100)]

지구에 국가가 200여개 정도 있으니까 언어수도 대충 그정도 있겠거니 했는데 언어가 1000개가 넘었어? ㄷㄷ

[익명(1.239)]

방언이나 소수민족, 부족도 포함하면 그렇지 않을까

[ㅇㅇㅇ(14.38)]