TruLens — AI 에이전트의 평가(Evals)와 추적(Tracing)
TruLens
에이전트가 잘못된 답을 내놨을 때 "왜 그랬지?"를 알려면, 각 단계의 입력·출력·토큰·비용을 추적하고 판정하세요. TruLens는 AI 에이전트를 위한 오픈소스 평가·추적 도구예요. OpenTelemetry 네이티브로 동작해 스팬(span)마다 지연·입력·출력·토큰·비용을 기록하고, LLM-as-a-judge로 점수를 매겨서 "vibes" 대신 지표(metrics)로 에이전트 품질을 판단하게 해줘요. 원래 TruEra가 만들었고, Snowflake가 인수한 뒤 오픈소스로 유지·관리되고 있어요.
이 카테고리의 문서
- 소개: TruLens가 에이전트를 평가·추적하는 방식
- 퀵스타트: RAG 앱을 만들고 피드백 받기
- 설치: conda·pip로 시작하기