Paper Understanding
Papers
Concepts
Formulas
KO
EN
bn_normalize
BN 정규화
x
^
i
=
x
i
−
μ
B
σ
B
2
+
ϵ
\hat{x}_i = \frac{x_i - \mu_\mathcal{B}}{\sqrt{\sigma^2_\mathcal{B} + \epsilon}}
x
^
i
=
σ
B
2
+
ϵ
x
i
−
μ
B
BN 정규화
수식 상세 →
기호를 클릭하면 의미를 볼 수 있습니다
x
^
i
\hat{x}_i
x
^
i
ϵ
\epsilon
ϵ
단계별 설명
1
배치 기준으로 대략 평균 0, 분산 1로 맞춘다.
2
포화·스케일 폭주를 줄여 학습을 안정화한다.
관련 논문
batchnorm