딥러닝 기본개념

시그모이드의 함수식과 생김새 시그모이드는 로지스틱 함수의 한 케이스. 로지스틱 함수란 y값을 0과 1사이로 만드는 함수. 인풋이 단 하나 소프트맥스의 함수식과 생김새 소프트 맥스는 시그모이드의 확장형으로 n개의 인풋 수용가능 n개의 인풋에 대해 n

vector, scalar = 백터, 스칼라 > cosine, sine = 코사인, 사인 1. 백터는.. 크기와 방향을 가지고 있다 2. 스칼라는.. 단순히 크기만 가지고 있다. 3. 내적은.. 두 벡터의 서로 대응되는 성분들을 곱한 뒤 모두 더하는 연산을함. 이

각 토큰의 의미를 모델이 이해하는 최종과정에서 추론 확률 분포를 조절하는 파라미터.예시) "It is mine." 이라는 문장에서 It 이라는 토큰에 대해 모델이 아래 확률분포로 예상 후보들을 추론할 수 있음. 이후 최종적으로 It 토큰의 의미를 결정(추론)하는 과정