hugging face NLP course pt3. Fine-tuning a pretrained model: https://huggingface.co/learn/nlp-course/chapter3/1?fw=ptwikidocs 번역본: https://wikidocs.net/1668001. 데이터 처리 작업허브에서 데이터셋 로딩Huggingface -> datasets 라이브러리에서 오픈소스 데이터셋 자유롭게 다운가능 (구조화된 raw text dataset)fine-tuning 위해서는 raw text -> batch 형태로 변경해야 함 * 지나치게 큰 데이터 한 번에 학습X, batch라는 소규모 데이터로 변경하여 모델에게 학습하기datasets 라이브러리: Hub에서 데이터셋 다운로드 & 임시저장(c..
