문제
다음 중 과대 적합 방지를 위한 방법이 아닌 것은 무엇인가?
① 배깅(bagging) ② 홀드 아웃(Hold-out) ③ 의사결정 나무 ④ Lasso, Ridge 모델
정답
3번
해설
정답: 3. 의사결정나무는 그 자체로 과적합(과대적합)이 잘 일어나는 모형으로, 과적합을 방지하는 기법이 아니다. 배깅·홀드아웃·규제(Lasso·Ridge)는 모두 과적합을 줄이는 방법이다.
오답 풀이
- 1번: 배깅은 여러 모델을 부트스트랩으로 학습·결합해 분산을 줄여 과적합을 완화한다.
- 2번: 홀드아웃은 데이터를 학습·검증으로 나눠 일반화 성능을 점검해 과적합을 방지한다.
- 3번: 의사결정나무는 깊어지면 과적합되기 쉬운 모형이므로 방지 방법이 아니어서 정답이다.
- 4번: Lasso·Ridge는 계수에 규제를 가해 모델 복잡도를 낮춰 과적합을 방지한다.
보충 개념 과적합 방지: 데이터 분할(홀드아웃·교차검증), 규제(L1·L2), 앙상블(배깅·부스팅), 가지치기(트리), 드롭아웃(신경망) 등이 있다. 의사결정나무는 가지치기로 과적합을 줄인다.