강의 소개
본 강의에서는 자연어 처리 분야에서 널리 사용되는 사전학습된 언어 모델(Pre-trained Language Model)에 대한 간략한 소개와 성능 평가 방법을 다룹니다. 구체적으로, 유명한 언어 모델(ELMo, BERT) 몇 가지를 소개하고, 이러한 영어 기반 언어 모델을 평가하는 데 널리 사용되는 GLUE 벤치마크에 어떤 과제들이 포함되어 있는지 설명합니다. 그리고 한국어 자연어 이해 벤치마크(KLUE)를 이와 비교했을 때 무엇이 다른지 살펴봅니다.