ML&DL

인공신경망이란 무엇인가? (뉴럴 네트워크)

임이레 2023. 2. 15. 16:16

1. 다층 퍼센트론(Multi-layer Perceptron)

 - 입력층 하나와 은닉층(hidden-layer)이라고 불리는 하나 이상의 TLU (중간)층과 출력층으로 구성되어 있음.

 - 출력층을 제외하고 모든 층은 편향 뉴런을 포함하여 다음층과 완전히 연결된다.

 - 인공신경망의 은닉층이 2개 이상일 때, 심층 신경망(DNN)이라 부른다.

 

2. 역전파(Backpropagation)  : for 'algorithm tuning'
 - 다층 퍼셉트론을 효율적으로 학습시킬 수 있는 알고리즘.

 - 각 훈련 샘플에 대해 역전파 알고리즘이 먼저 예측을 만들고(정방향'feed forward') , 오차를 측정하고, 그 다음 역방향으로 각 층을 거리면서 각 연결이 오차에 기여한 정도를 측정(역방향)

 - 이 오차가 감소하도록 가중치(weight)을 조금씩 조정한다. <- 경사하강법