Paper Understanding
Papers
Concepts
Formulas
KO
EN
constitutional_ai
Constitutional AI
짧은 원칙(헌법)으로 AI가 자신의 출력을 비판·수정하고, 무해성 선호 라벨도 AI가 매기는 정렬 방법 (Anthropic, 2022).
관련 수식
CoT 선호도 클램프
보상 모델 손실
PPO 목적 (KL 페널티)
관련 논문
constitutional-ai
instructgpt