doeunn.log

▶딥러닝 역전파(Backpropagation) 1) 순전파(Forward propation) 순전파(forward propation)은 뉴럴 네트워크 모델의 입력층부터 출력층까지 순서대로 변수들을 계산하고 저장하는 것을 의미합니다. 입력받은 데이터를 각 가중치에 곱하여 출력을 뽑아내는 과정이라고 볼 수 있겠습니다. 2) 역전파(Back propagation) 역전파는 틀린 예측을 바로 잡기 위해 파라미터를 순차적으로 수정해 나가는 학습 알고리즘입니다. 역전파(back propagation)는 뉴럴 네트워크의 파라미터들에 대한 그래디언트(gradient)를 계산하는 방법을 의미합니다. 일반적으로 역전파(back propagation)은 뉴럴 네트워크의 각 층과 관련된 목적 함수(objective funct..