벡터DB·RAG 인프라 중급 ③ — 평가·회귀(리콜@k) | DAKER 학습
중급 · 약 130분
검색 결과에 필요한 문서가 얼마나 포함되는지 리콜@k로 평가하는 방법을 익힙니다. 질문과 정답 문서로 평가 기준 데이터인 골든셋을 만들고, 검색 설정을 바꾸기 전후의 결과를 비교해 품질이 떨어진 부분을 찾아냅니다.
커리큘럼
- 쉬운 개념부터: 시합 전에 같은 문제로 채점
- 퀴즈 — 쉬운 개념부터: 시합 전에 같은 문제로 채점
- 평가 지표
- 퀴즈 — 평가 지표
- 골든셋
- 퀴즈 — 골든셋
- 회귀 루프
- 퀴즈 — 회귀 루프
- 미니 랩: 리콜@k 리포트
- 퀴즈 — 미니 랩: 리콜@k 리포트
- 플래시카드
- 실습: 검색 정답 비율 계산 카드