n-gram

Creator

Creator

Seonglae Cho

Created

Created

2023 May 9 14:28

Editor

Editor

Seonglae Cho

Edited

Edited

2024 Jul 19 2:7

Refs

Refs

Next Token Prediction

Simplest kind of Language model

bag-of-words model 의 차원이 기하급수적으로 커짐

n-grams

03-03 N-gram 언어 모델(N-gram Language Model)

n-gram 언어 모델은 여전히 카운트에 기반한 통계적 접근을 사용하고 있으므로 SLM의 일종입니다. 다만, 앞서 배운 언어 모델과는 달리 이전에 등장한 모든 단어를 고려하는 것…

03-03 N-gram 언어 모델(N-gram Language Model)

https://wikidocs.net/21692

03-03 N-gram 언어 모델(N-gram Language Model)

03-03 N-gram 언어 모델(N-gram Language Model)

n-gram 언어 모델은 여전히 카운트에 기반한 통계적 접근을 사용하고 있으므로 SLM의 일종입니다. 다만, 앞서 배운 언어 모델과는 달리 이전에 등장한 모든 단어를 고려하는 것…

03-03 N-gram 언어 모델(N-gram Language Model)

https://wikidocs.net/21692

03-03 N-gram 언어 모델(N-gram Language Model)

Recommendations

////////