DeepLearning - 신경망

퍼셉트론 등장

맥컬럭-윌터피츠(1943): 입력에 대해 일정치 이상이면 활성화(0과 1)하는 이진 장치 만들어보자

프랑크 로젠블랫(1957): 입력값 여러 개 각각에 가중치를 조절해봐, 이게 퍼셉트론이야.

  • 활성화 함수 -> 각 뉴런의 on/off 결정 -> 0/1 등의 출력 변환 짜잔! z=w1z1+w2x2+bz =w_1z_1 + w_2x_2 + b

구분의 한계

퍼셉트론은 한계가 있다. 아래의 네 점이 있을 때, 점 사이의 직선 하나로 o와 x를 구분하는 선은 만들 수 없다.

o  x
x  o

즉, 함수로 선을 만들어도 해결되지 않는 것이 있다.

XOR이 문제다.

  • XOR: 둘 중 하나만 1이면 참임

… 계속 …