Seonglae ChoOverfitting removal
train set을 다시 train set + validation set으로 분리하지 않는다라고 가정하면, 우리는 모델 검증을 위해서 test set을 사용하여야 할 것이다
test set에 과적합 되는 문제'는 test set이 데이터 중 일부분으로 고정되어 있기 때문에 발생
먼저 전체 데이터 셋을 k개의 subset으로 나누고 k번의 평가를 실행하는데, 이 때 test set을 중복 없이 바꾸어가면서 평가를 진행한다. 이게 fold를 두번에 걸쳐 나눠서 전체를 validation으로 사용하는 이유
Cross Validation Methods
교차 검증(cross validation)
이 경우에 만약 'train set을 다시 train set + validation set으로 분리하지 않는다'라고 가정하면, 우리는 모델 검증을 위해서 test set을 사용하여야 할 것이다. 사실상 test set이 아닌 valdiation set인 셈인데, 여기에 한 가지 약점이 존재한다. 고정된 test set을 가지고 모델의 성능을 확인하고 파라미터를 수정하고, 이 과정을 반복하면 결국 내가 만든 모델은 test set에만 잘 동작하는 모델이 된다.
https://m.blog.naver.com/PostView.nhn?blogId=ckdgus1433&logNo=221599517834&categoryNo=11&proxyReferer=http%3A%2F%2Fwww.google.com%2Furl%3Fsa%3Dt%26rct%3Dj%26q%3D%26esrc%3Ds%26source%3Dweb%26cd%3D1%26ved%3D2ahUKEwjT5Pna59nmAhWyGaYKHaaTAQsQFjAAegQIBhAB%26url%3Dhttp%253A%252F%252Fm.blog.naver.com%252FPostView.nhn%253FblogId%253Dckdgus1433%2526logNo%253D221599517834%2526categoryNo%253D11%2526proxyReferer%253D%26usg%3DAOvVaw1_wYEneH8KBGG_rgcjFSiR
