profile
나는야 호기심 많은 느림보🤖
post-thumbnail

효율적인 Hyperparameter Tuning | Ray

가장 기본적인 방법으로 grid vs random 있다.최근에는 베이지안 기반 기법들이 주도하고 있다.learning rate 0.1, 0.01, 0.001 → ...batchsize 32, 64, 128 → ...조합들을 적용해가며 가장 좋은 하이퍼파라미터를 찾는다.

2022년 1월 27일
·
1개의 댓글
·
post-thumbnail

PyTorch Monitoring tools | 학습과정 쉽게 그래프로 살펴보기

오늘은 PyTorch에서 쉽게 그래프 등 시각화하여 살펴볼 수 있는 방법들을 소개하려고 한다. 원래 matplotlib 밖에 모르던 때는 귀찮아서 잘 안그렸지만, 확실히 시각화해서 보는게 학습과정 이해에 필요한 것 같다.아래의 도구들은 귀찮다라는 말을 달고 사는 내가

2022년 1월 27일
·
1개의 댓글
·