[딥러닝] 깊은 신경망

깊은 다층 퍼셉트론 구조(DMLP)

• L-1개의 은닉층
• 마지막 L층은 분류층

DMLP의 가중치 행렬

• 각 노드별로 연결되는 모든 경우의 수가 행렬에 담김

오류 역전파

• 목적함수로부터 각 출력층에 대한 그래디언트 산출
• 아웃 그래디언트를 그 전 단계 층 가중치 행렬에 대한 그래디언트 산출

• 그 아래층부터 그 또 아래층 그래디언트 계산