AdaBoost (Adaptive Boosting)

AdaBoost를 이용하여 데이터를 분류하는 예시

• Model1 에서 잘못 예측한 데이터에 가중치를 부여
• Model2 는 잘못 예측한 데이터를 분류하는데 더 집중
• Model3는 Model1,2 가 잘못 예측한 데이터를 분류하는데 집중

• Cost Function: 가중치(W)를 반영하여 계산

$$
J(\theta) = \sum{i}Ji(\theta,x^{(i)})
$$

• 3개의 모델별로 계산된 가중치를 합산하여 최종 모델을 생성