LLM 파인튜닝 고급 ① — RLHF/헌법AI 큰 그림 | DAKER 학습

고급 · 약 130분

사람의 선호와 명시된 원칙을 활용해 모델의 응답 방향을 조정하는 방법을 알아봅니다. 보상모델을 사용하는 RLHF와 원칙에 따라 응답을 비평하고 개선하는 헌법 AI의 흐름을 비교하며, 적용 목적에 따른 선택 기준을 배웁니다.

커리큘럼

• 쉬운 개념부터: 연습 후 코치 피드백
• 퀴즈 — 쉬운 개념부터: 연습 후 코치 피드백
• RLHF 큰 그림
• 퀴즈 — RLHF 큰 그림
• 보상모델
• 퀴즈 — 보상모델
• 헌법 AI 감각
• 퀴즈 — 헌법 AI 감각
• 미니 랩: 파이프라인 선택
• 퀴즈 — 미니 랩: 파이프라인 선택
• 플래시카드
• 실습: 챗봇 학습 방법 선택 카드