LLM 파인튜닝 중급 ② — 학습률·오버핏·체크포인트 | DAKER 학습
중급 · 약 125분
학습률이 모델의 변화 폭에 미치는 영향을 살펴보고, 학습 데이터에만 지나치게 맞춰지는 과적합의 징후를 알아봅니다. 검증 결과로 학습 상태를 판단하고 체크포인트를 저장해 학습을 재개하거나 적절한 모델을 선택하는 방법을 배웁니다.
커리큘럼
- 쉬운 개념부터: 연습 속도와 저장 타이밍
- 퀴즈 — 쉬운 개념부터: 연습 속도와 저장 타이밍
- 학습률 감각
- 퀴즈 — 학습률 감각
- 오버핏 신호
- 퀴즈 — 오버핏 신호
- 체크포인트
- 퀴즈 — 체크포인트
- 미니 랩: 곡선 읽기
- 퀴즈 — 미니 랩: 곡선 읽기
- 플래시카드
- 실습: 학습 기록과 저장본 선택표