🤗 Evaluate GitHub — 라이브러리 저장소와 기여

🤗 Evaluate GitHub

🤗 Evaluate는 Hugging Face가 관리하는 모델·데이터셋 평가 라이브러리예요. GitHub 저장소에서 소스 코드와 함께 설치·사용 가이드를 확인할 수 있습니다.

출처: https://github.com/huggingface/evaluate

라이브러리 특징

• 다양한 도메인(NLP, CV, 강화학습)의 수십 가지 평가 방법
• 한 줄(evaluate.load())로 metric·comparison·measurement 로드
• 로컬·분산 학습 설정에서 재현 가능한 평가
• 각 metric은 Hugging Face Hub의 Space로 제공되며 위젯·문서 카드 포함

관련 평가 도구

Hugging Face Hub의 최신 평가 접근은 LightEval 라이브러리도 참고할 수 있어요. LightEval은 LLM 평가용으로 설계되며 포괄적이고 커스터마이즈 가능해요.

기여

버그 보고, 이슈 제출, 풀 리퀘스트로 라이브러리 개선에 참여할 수 있어요.

더 알아보기

• 🤗 Evaluate GitHub
• 🤗 Evaluate 문서
• 🤗 Evaluate 조직 (Hub)