논문리뷰
1.논문 리뷰 스터디_BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding
NLP (자연어 처리)분야에서 큰 발전을 가져온 BERT에 대한 논문이다.위키에서 말하는 BERT:두 개의 문장을 준 후에 이 문장이 이어지는 문장인지 아닌지를 맞추는 방식으로 훈련시킵니다. 이를 위해서 50:50 비율로 실제 이어지는 두 개의 문장과 랜덤으로 이어붙인
2021년 7월 12일