애플리케이션

애플리케이션 (Applications)

Ragas의 실제 사용 예시를 보여줘요. 각종 애플리케이션과 사용 사례에서 Ragas를 어떻게 쓰는지, 그리고 개발 중 맞닥뜨릴 수 있는 문제를 해결하는 방법을 다뤄요.

출처: 문서

본문

Ragas를 다양한 애플리케이션과 사용 사례에 적용한 예시들이에요. 빌드하면서 겪을 수 있는 문제를 해결하는 데 도움이 돼요.

프롬프트 평가 (Prompt Evaluation)

• 프롬프트 반복 개선
• 체계적인 프롬프트 최적화

메트릭 (Metrics)

• 추적을 사용한 LLM 기반 메트릭 디버깅
• 멀티턴 대화 평가
• 평가 비용 추정
• Vertex AI 모델로 평가하기

테스트셋 생성 (Testset Generation)

• 싱글홉 쿼리 테스트셋

벤치마킹 (Benchmarking)

• 사용 사례에 맞는 새 LLM 평가

RAG 평가 (RAG Evaluation)

• RAG 시스템 평가 및 개선

에이전트 평가 (Agent Evaluation)

• Text-to-SQL 에이전트 평가