문제
단계별 변수 선택 방법에 대한 설명으로 옳지 않은 것은?
① 전진 선택법은 중요하다고 생각되는 변수부터 차례로 선택하는 방법이다. ② 후진 제거법은 변수의 개수가 많은 경우에 사용하기가 어렵다. ③ AIC, BIC는 통계량이 낮을수록 적합한 변수 선택 조합이라 판단할 수 있다. ④ Lasso는 L2패널티를 이용하여 변수를 선택한다.
정답
4번
해설
정답: 4. Lasso는 회귀계수의 절대값 합에 패널티를 주는 L1 정규화를 사용해 일부 계수를 정확히 0으로 만들어 변수를 선택한다. ‘L2 패널티를 이용한다’는 것은 능형회귀(Ridge)의 설명이므로 옳지 않다.
오답 풀이
- 1번: 전진선택법은 중요한 변수부터 하나씩 추가하는 방법으로 옳다.
- 2번: 후진제거법은 모든 변수에서 시작해 제거하므로 변수가 매우 많으면 부담이 커 옳다.
- 3번: AIC·BIC는 값이 작을수록 적합도 대비 간결한 모형으로 좋게 평가하므로 옳다.
- 4번: Lasso는 L1 패널티를 쓰므로 ‘L2 패널티’라는 설명은 옳지 않다.
보충 개념 정규화 — Ridge(L2, 계수 축소), Lasso(L1, 변수 선택), Elastic Net(L1+L2 결합).