【1】Deep Learning 시작하기_최적화가 가장 중요하다!
Momentum Optimizer
“SGD는 너무 지그재그로 가네? 진행 하던 방향으로 계속 가 보자!“
작성자 홍다혜 ghdek11@gmail.com / 이원재 ondslee0808@gmail.com
'BLOG > 딥러닝' 카테고리의 다른 글
RMSProp (0) | 2021.03.24 |
---|---|
Adagrad Optimizer (Adaptive Gradient) (0) | 2021.03.24 |
최적화(Optimizer)가 뭐였지? 확률적 경사 하강법(SGD) (0) | 2021.03.24 |
신경망 모형의 기본 구조 (0) | 2021.03.24 |
발전된 비선형 함수(Nonlinearity) (Ricky ReLU / Parametric ReLU 등) (0) | 2021.03.24 |