본문 바로가기
Data Science/머신러닝&딥러닝 기초 이론

[딥러닝 실습] MNIST backpropagation 최고 성능 찾아보기 (learning rate, epoch 편)

by titaniumm 2020. 7. 4.

이번 과제는 정해진 2-layer에서 learning rate과 epoch를 어떻게 조절하면 가장 높은 결과가 나오는지 실험해보고

성능을 최대로 하는 epoch와 learning rate을 찾는 것 이였습니다.

 

사실 과제를 할 당시에는 노가다라고 생각했으며, 과연 도움이 될까를 생각하며 1주일 내내 컴퓨터를 돌려봤는데

과제를 수행하고 나서 달라진 점은 있는 것 같습니다.

 

epoch와 learning rate을 어떻게 해야 적당할까?? 라는 질문에

"음.... 조금씩 키워보거나 작게 해보면 되겠지" 에서

"x만큼 정도 키워보거나 x만큼 변화를 줘보자" 로 비슷한거 같지만

조금이나마 어떤 값들로 움직여야 하는지 감을 잡을 수 있었습니다.

 

댓글