목록2024/01/30 (1)
working_helen
[NLP] Language Model / n-gram, NNLM, RNNLM
1. Language Model 2. n-gram Language Models 3. NNLM 4. RNN 1. Language Model (LM) - 가능한 모든 word sequence에 대하여 확률을 계산하는 모델 - 이전 단어들이 주어졌을 때 특정 단어가 그 다음으로 올 확률을 계산하는 모델 - 이전 단어들로부터 다음 단어를 예측하는 모델 - 2가지 접근방식 통계적 언어 모델(Statistical Language Model, SLM) : n-gram 인공 신경망 언어 모델(Neural Network Based Language Model) : RNN w : 각각의 단어 W : n개의 단어가 등장하는 word sequence = text n-1개의 word sequence 뒤에 n번째 단어의 확률 te..
교내 수업/인공지능
2024. 1. 30. 15:44