복합(Composite) 온라인 평가자 설정하기
복합(Composite) 온라인 평가자 설정하기
온라인 평가는 프로덕션 트레이스에 실시간 피드백을 제공해요. 이를 통해 문제를 식별하고, 개선을 측정하며, 시간이 지나도 일관된 품질을 보장하는 방식으로 애플리케이션 성능을 지속적으로 모니터링할 수 있어요.
복합 평가자는 여러 평가자 점수를 단일 점수로 결합하는 방법이에요. 애플리케이션의 여러 측면을 평가하고 그 결과를 하나의 결과로 합치고 싶을 때 유용해요.
참고: 온라인 평가자가 트레이스 내의 어떤 런에서 실행되면, 해당 트레이스는 자동으로 확장 데이터 보존으로 업그레이드돼요. 이 업그레이드는 트레이스 요금에 영향을 주지만, 평가 기준을 충족하는 트레이스(일반적으로 분석에 가장 가치 있는 것들)를 조사용으로 보존해 줘요.
출처: 문서
본문
온라인 평가자 보기
Tracing Projects 탭으로 이동해 트레이싱 프로젝트를 선택하세요. 해당 프로젝트의 기존 온라인 평가자를 보려면 Evaluators 탭을 클릭하세요.
복합 온라인 평가자 구성하기
트레이싱 프로젝트에서 온라인 평가용 복합 평가자를 만들 수 있어요. UI의 복합 평가자를 사용하면 여러 평가자 점수의 가중 평균 또는 가중 합을 구성 가능한 가중치로 계산할 수 있어요.
1. 트레이싱 프로젝트로 이동
복합 평가자 구성을 시작하려면 Tracing 페이지로 이동해 트레이싱 프로젝트를 선택하세요.
트레이싱 프로젝트 보기에서 Evaluators 탭으로 이동하세요. + Evaluator를 클릭해 Add Evaluator 패널을 여세요. Create from scratch 아래에서 Composite Score를 클릭하세요.
2. 복합 평가자 구성
- 평가자 이름을 지정하세요.
- 집계 방법(Average 또는 Sum)을 선택하세요.
- Average: ∑(weight*score) / ∑(weight)
- Sum: ∑(weight*score)
- 복합 점수에 포함할 피드백 키를 추가하세요.
- 피드백 키에 대한 가중치를 추가하세요. 기본적으로 각 피드백 키의 가중치는 동일해요. 특정 피드백 키의 중요도를 높이거나 낮추려면 가중치를 조정하세요.
- Create를 클릭해 평가자를 저장하세요.
팁: 복합 점수의 가중치를 조정해야 한다면, 평가자를 만든 후에도 업데이트할 수 있어요. 결과 점수는 평가자가 구성된 모든 런에 대해 업데이트돼요.
3. 복합 평가자 결과 보기
복합 점수는 단일 평가자의 피드백과 마찬가지로 런에 피드백으로 연결돼요.
트레이싱 프로젝트에서:
- 복합 점수가 런에 피드백으로 나타나요.
- 복합 점수가 있는 런, 또는 복합 점수가 특정 임계값을 충족하는 런을 필터링할 수 있어요.
- 복합 점수의 시간에 따른 추세를 시각화하는 차트를 만들 수 있어요.
참고: 구성 요소 중 어떤 평가자라도 런에 구성되어 있지 않으면 해당 런에 대한 복합 점수는 계산되지 않아요.