ML lec(이론) 6-1 - Softmax Regression 기본 개념

박성재·2020년 12월 6일
0
post-thumbnail

출처: 모두를 위한 딥러닝 강좌 시즌 1 by Sung Kim


Logistic Regression

  • 로지스틱 회귀에서는 함수가 반환하는 값이 0에서 1사이에 오게 하기 위해, 선형회귀의 결과를 sigmoid 함수에 입력해서 반환된 값을 예측값으로 사용한다.
- Logistic Classfication은 위와 같이 데이터들을 구분하는 hyperplane을 찾아내는 과정.

Multinomial Classification(다중 분류)

Multinomial Classfication이란, 데이터를 0과 1 둘 중 하나가 아닌, 보다 다양한 범주로 분류하는 것이다.

  • Multinomial classification은 위와 같이 여러 개의 각각 다른 binary classification(이진 분류)을 가지고도 구현이 가능하다.

  • 이를 행렬식으로 표현하면 아래와 같다. 이진 분류의 수만큼 늘어난 가중치 행렬(WW)과 예측값(Y^\hat{Y})을 확인할 수 있다.

  • 위와 같이 행렬의 곱셈을 통해서 여러 개의 독립된 classification을 수행할 수 있다.

0개의 댓글