Evaluation
Evaluation (평가)
Ragas의 핵심 평가 함수 evaluate()에 대한 API 문서예요. 데이터셋과 지표를 넣으면 각 지표의 점수를 계산해서 돌려주는 구조를 확인할 수 있어요.
출처: 문서
본문
evaluate()
from ragas import evaluate
>>> dataset
Dataset({
features: ['question', 'ground_truth', 'answer', 'contexts'],
num_rows: 30
})
>>> result = evaluate(dataset)
>>> print(result)
{'context_precision': 0.817,
'faithfulness': 0.892,
'answer_relevancy': 0.874}