◆ 신경망의 예 신경망의 예
신경망을 그림으로 나타내면 [그림 3-1]처럼 된다. 가장 왼쪽 줄을 입력층, 맨 오른쪽 줄을 출력층, 중간 줄을 은닉층이라고 한다. 은닉층의 뉴런은 (입력층이나 출력층과 다릴) 사람 눈에는 보이지 않는다.
$$ y = \begin{cases} 0 & (b + w1x1 + w2x2 \leq0), \\ 1 & (b + w1x1 + w2x2 >0) \end{cases} $$
[식 3.1]
여기서 b는 편향을 나타내는 매개변수로, 뉴런이 얼마나 쉽게 활성화되느냐르 제어한다. 한편, w1과 w2는 각 신호의 가중치를 나타내는 매개변수로, 각 신호의 영향력을 제어한다.
[식 3.1]을 더 간결한 형태로 다시 작성해보자. 이를 위해서 조건 분기의 동작(0을 넘으면 1을출력하고 그렇지 않으면 0을 출력)을 하나의 함수로 나타낸다.
$y = h(b + w1x1 + w2x2)$
[식 3.2]
$$ y = \begin{cases} 0 & (x \leq0), \\ 1 & (x > 0) \end{cases} $$
[식 3.3]
[식 3.2]는 입력 신호의 총합이 h(x)라는 함수를 거쳐 변환되어, 그 변환된 값이 y의 출력이 됨을 보여준다. [식 3.3]의 h(x) 함수는 입력이 0을 넘으면 1을 돌려주고 그렇지 않으면 0을 돌려준다. 결과적으로 [식 3.1]이 하는 일과 [식 3.2]와 [식 3.3]이 하는 일은 같다.