[Deep Learning] Regularization

[Deep Learning] Regularization Regularization에 대해 자세히 알아보려면 Overfitting이 무엇인지 알아야한다. 그럼 Overfitting과 더불어 Underfitting 까지 알아보자. Overfitting 한 data set에만 지나치게 최적화된 상태 아래 그래프처럼 학습 데이터에 대해서는 오차가 감소하지만 실제 데이터에 대해서는 오차가 증가하는 지점이 존재할 수 있다. 다시 말해 overfitting은 학습데이터에 대해 과하게 학습하여 실제 데이터에 대한 오차가 증가할 경우 발생한다. Underfitting Underfitting 이란 모델이 너무 간단하기 때문에 학습 오류가 줄어들지 않는 것이다. 그렇다면 Overfitting을 완화시키는 방법에는 어떤것들이..