신경망이란 무엇인가? | Chapter 1, 딥러닝에 관하여 [3Blue1Brown]

Bias : 뉴런이 활성화 되려면 가중치의 합이 '얼마나' 커야하는지를 보여주는 정도
ex) 가중치, 즉 weight와 input값의 행렬곱에 bias를 더한 값이 하나의 Perceptron의 Output 값이다.

$Output = WX+bias$

저 Output은 보통 Sigmoid Function(로지스틱 곡선)에 들어간다.

1 : 활성화
0 : 비활성화
Output은 어떤 값이든지 나올 수 있다.
근데 나는 Weight와 Input값의 곱이 적어도 10 이상은 나왔을 때, Perceptron이 활성화되었으면 좋겠어
그러면 Bias를 10으로 설정하면 되는거임!

[+] From 3blue1brown DeepLearning Chapter 2 (20220226)
"bias는 뉴런이 활동적인지 또는 비활동적인지를 나타내는 지표입니다."
bias가 크다는 뜻은 무슨 뜻일까? 해당 뉴런의 Activation, 즉 활성화를 최대한 저지한다는 의미이다.