문제
정보 이득(Information Gain)에 대한 설명으로 가장 적절한 것은?
① 분할 후 불순도가 증가한 정도를 나타낸다 ② 분할 전후 불순도의 감소량을 측정하는 지표이다 ③ 연속형 변수에만 적용할 수 있는 지표이다 ④ 값이 클수록 분할 효과가 나쁨을 의미한다
정답
2번
해설
정보 이득은 의사결정나무에서 분할 전 엔트로피에서 분할 후 가중평균 엔트로피를 뺀 값으로, 불순도의 감소량을 나타냅니다. ① 불순도는 감소해야 좋은 분할입니다. ③ 범주형 변수에도 적용 가능합니다. ④ 값이 클수록 분할 효과가 좋습니다.