lm (1) 썸네일형 리스트형 언어모델(Languagel Model) 1.언어모델이란? 2.통계적 언어 모델(Statistical Language Model, SLM) 3.N-gram 언어 모델 4.Perplexity, PPL 1.언어모델이란? 언어 모델(Languagel Model)? 단어 시퀀스(문장)에 확률을 할당하는 모델 이를통해 빈칸에 들어갈 단어를 예측하는데 사용됩니다. 통계에 기반한 전통적인 언어 모델(Statistical Languagel Model, SLM)에 대해서 학습합니다. 통계에 기반한 언어 모델은 우리가 실제 사용하는 자연어를 근사하기에는 많은 한계가 있었고, 요즘 들어 인공 신경망이 그러한 한계를 많이 해결해주면서 통계 기반 언어 모델은 많이 사용 용도가 줄었습니다. 하지만 그럼에도 통계 기반 방법론에 대한 이해는 언어 모델에 대한 전체적인 시야.. 이전 1 다음
