꿈라CBT다음 <보기>의 절차에 대한 지적으로 가장 적절한 것은?
보기
하이퍼파라미터 조합 500가지를 탐색하였다.
- 매번 같은 검증 세트로 성능을 측정하고, 가장 좋은 조합을 선택했다.
- 선택된 조합의 검증 정확도 92%를 그대로 최종 성능으로 보고했다.
- 실제 운영에서의 정확도는 84%에 그쳤다.
- 1같은 검증 세트를 반복 사용해 성능이 낙관적으로 편향된 것이므로, 별도 테스트 세트나 중첩 교차검증이 필요하다.
- 2검증 세트를 500번 사용한 것은 문제가 없으며, 운영 정확도가 낮은 것은 조합 수가 부족했기 때문이므로 5,000가지를 탐색해야 한다.
- 3검증 정확도와 운영 정확도의 차이는 항상 발생하는 자연스러운 오차이므로 별도의 조치가 필요하지 않다.
- 4하이퍼파라미터 탐색은 학습 데이터로 수행해야 하므로, 검증 세트 대신 학습 세트 성능으로 조합을 골라야 한다.