doeunn.log

▶ RNN을 위한 PyTorch 구현 RNN 학습 과정 t-1 시점의 hidden state와 t 시점의 input vector를 받음 → 학습 → 나온 결과물로 output vector를 도출 RNN 학습 ← U, W, V 이 3가지의 weight를 학습을 하는 것 Text generation 이번 글에서 해볼 학습은 Text generation 입니다. 예를 들어 'hello'라는 단어가 있다고 했을 때, 모델의 input으로 'h', 'e', 'l', 'l', 'o' 하나하나씩 들어오게 됩니다. 이때 input이 'h'일 경우 output은 그 다음 글자 'e'가 됩니다. 'e'가 input으로 들어오게 되면 output은 'l'이 되야겠죠? 이러한 input과 output을 알고 있다고 했을 때 ..