SYNTHETIC CONTINUED PRETRAINING 논문리뷰

지금의 수많은 corpus를 학습한 pretain 모델은 domain-specific한 작은 corpus의 문서에 적용하기 challenging

EntiGraph 알고리즘

https://arxiv.org/pdf/2409.07431v1