Evals — LLM 앱 성능을 측정하고 개선하는 평가
Evals
LLM 앱은 '잘 되는 것 같다'로는 판단하기 어려워요. **Eval(평가)**은 모델 출력이 정한 기준(스타일·내용)을 충족하는지 테스트로 확인하는 방법이에요. 특히 모델을 업그레이드하거나 새 모델로 바꿀 때, '기대 대비 얼마나 잘하나'를 수치로 가늠하게 해줘요.
이 카테고리의 문서
- 개요: Evals API로 태스크 정의·실행·분석
- 핵심 기능: cookbook — 요약 결과 평가하기
- 실전·API: Evals 가이드 상세