728x90
해당하는 식의 가중치로 연산하고 ReLU 연산하고 다음 층으로 가게된다.
이론적으로 거의 MLP와 유사하기 때문에 설명은 생략한다.
전방계산으로 실제값 예측값의 차이를 알고, 가중치를 구한다.
이것을 반복해서 미니배치 단위로 진행하고 오류역전파한다.
퍼셉트론 Perceptron | 다층 퍼셉트론 MLP | 깊은 다층 퍼셉트론 DMLP | |
활성함수 | 계단함수 | 시그모이드 함수 | ReLU와 변형들 |
목적함수 | 평균제곱 오차 | 평균제곱 오차 | 교차 엔트로피 또는 로그우드 |
합성곱 신경망 Convolutional Neural Networks CNN
깊은 다층 퍼셉트론에서 파생된 새로운 알고리즘
사진 영상 인식에서 DMLP보다 인식률이 좋다.
심층학습은 종단간 End-to-End에 최적화된 학습이 가능하다.
728x90