딥러닝에서는 과적합을 막기 위해 굳이 신경망을 작게 만들지 않는다.
대신 적절한 규제 기법들을 활용한다.
Early Stopping
Parameter Norm Penalty
Data Augmentation(데이터 증대)
Weight Decay(가중치 감쇠)
Noise Robustness
Label Smoothing
드롭아웃
BN: Batch Normalization
앙상블