본문으로 건너뛰기
🎯

6. 파인튜닝

LLM 파인튜닝: LoRA, Instruction Tuning, SFT, RL, Reasoning LLM

학습 시작
학습 진행률0%

0 / 7 챕터 완료

챕터 목록

1.Fine-Tuning의 이해

Fine-Tuning의 정의, Training과의 차이점, 모델 종류, 파이프라인

2.강화 학습과 SFT

CPT, SFT, Instruction Tuning, RLHF, PPO, DPO 학습 방법론

3.파인 튜닝 데이터 구축하기

데이터 수집, 증강, 품질 관리, 지식 증류 기법

4.Instruction Tuning 실전

Instruction Tuning 개념, 데이터 전략, 실습 가이드

5.PEFT와 LoRA의 이해

Parameter Efficient Fine-Tuning 개념, LoRA 메커니즘, 장단점 분석

6.PEFT 실전 활용

LoRA, QLoRA 구현 실습, 하이퍼파라미터 튜닝, 실전 시나리오

7.Reasoning LLM과 파인 튜닝

RLVR, GRPO, DeepSeek-R1 학습 과정, SFT vs RL 비교