공부 일지

[Going Deeper - NLP]

• Transformer가 나오기까지
  • Attention
  • Attention is All you need
  • Positional Encoding
  • Multi-Head Attention
  • Position-wise Feed-Forward Networks
  • Additional Techniques
  • BERT
  • GPT

회고

• Going Deeper(NLP)도 반을 넘어서 이제 Transformer에 도달하였다.
• NLP의 꽃인 내용들인 만큼 주의깊게 봐야겠다.
• 게더의 비밀을 알아냈다. 박수소리 내기! 울산캠에 가서 순회공연도 하고 웃음을 주었다.
• 내일(금요일)만 하면 4월을 맞이하면서 주말을 보낸다.
• 요즘 많이 졸립기도 하지만 정신 차리고 Keep Going 해야겠다.