Paper Understanding
Papers
Concepts
Formulas
KO
EN
autoregressive_lm
자기회귀 언어 모델
이전 토큰(왼쪽 문맥)만으로 다음 토큰을 예측하는 LM. Causal mask를 쓰는 GPT 계열의 기본.
관련 수식
자기회귀 언어 모델
관련 논문
gpt2
transformer
gpt3