논문리뷰
1.VQA: Visual Question Answering
1. Introduction 이 논문에서는 "AI-complte" task 로 Visual Question Answering 에 대해 소개하고 있습니다. > AI-complete task란? AI 분야에서 가장 어려운 task, 즉 human-level의 intelli
2023년 2월 1일
2.Understanding Top-K Sparsification in Distributed Deep Learning
distributed SGD가 large-scale deep learning model 학습에 많이 사용되고 있는데 communication overhead 문제가 있어서 해결하기 위해 TopK-SGD이 등장했고, 이를 보완한 GaussianK-SGD를 제안한다.
2023년 8월 7일