산업데이터엔지니어링 대학원 1학기

본 과목에서는 대규모 언어 모델(Large Language Models: LLMs)에 대해 소개하고 이와 관련한 주요 기술을 학습할 수 있도록 한다. 자연어처리와 딥러닝에 대한 기본 지식을 보유하고 있는 수강생을 대상으로 하며 사전 학습에서부터 few-shot learning 및 zero-shot learning 등의 최근 개발된 학습 패러다임에 대한 내용을 다룬다. BERT 계열의 초기 모델 및 GPT 계열의 최신 모델, 이후 개발된 각종 LLM을 소개하고 학습 데이터 구성 방법 및 학습 방식의 차이를 습득할 수 있도록 한다. 마지막으로 LLM 사용을 위한 prompt engineering과 LLM fine-tuning 방식을 소개하며 마무리 한다.