Chapter 01. GPT 수업 개요 및 자연어 처리 기초
(전체 러닝타임: 1:10:17) | 01_GPT 소개 및 자연어 데이터 특징 |
02_기존 연구 간략 소개 및 수학 기초 | |
Chapter 02. Transformer
(전체 러닝타임: 1:30:15) | 01_Positional Encoding |
02_Multi-head self attention | |
03_Layer norm | |
04_Transforemr 관련 연구 1 : Computer Vision | |
05_Transforemr 관련 연구 2 : 시계열 데이터 | |
Chapter 03. BERT, GPT
(전체 러닝타임: 1:05:29) | 01_GPT-1 |
02_BERT, GPT-2, GPT-3 | |
Chapter 04. Hugging face 라이브러리
(전체 러닝타임: 1:50:29) | 01_pipeline 소개 및 사용법 |
02_Training 해보기 | |
03_디버깅 간단 소개 | |
04_Dataset Lib | |
05_Tokenizer |