Batch normalization 관련
[ 제 네이버 블로그 글을 티스토리로 이전한 글입니다. 해당 글은 제 네이버 블로그에 2018.06.27에 작성되었었습니다 ] Kdnuggets에서 Batch normalization 관련 글을 보고 정리합니다. Batch normalization 논문이 발표된 이후(2015년), 대부분의 network들은 over-fitting을 줄이고 학습 속도를 높이기 위해 Batch normalization을 사용해왔습니다. 데이터를 처리함에 있어서, normalization의 유/무는 결과에 큰 영향을 주며, Batch normalization은 신경망 모델이 데이터를 처리할 때 각 Batch단위마다 normalization을 취해주는 것입니다. Batch normalization은 hidden unit 값의 ..
Machine learning
2021. 8. 2. 14:05