가이드
가이드 (Guides)
Confident AI 기능들을 구현 워크플로로 결합하는 엔드투엔드 워크스루 문서 목록이에요. 이 문서에서는 엔드투엔드 가이드와 마이그레이션 가이드를 워크플로별로 정리해 볼게요.
출처: 문서
본문
개요 (Overview)
가이드는 흔한 Confident AI 구현 워크플로를 위한 엔드투엔드 워크스루예요.
여러 Confident AI 기능이 실제 설정에서 어떻게 함께 작동하는지, 관련 코드와 설정이 한곳에 모인 걸 보고 싶을 때 이 가이드를 사용해요.
엔드투엔드 가이드
구현할 워크플로에 따라 가이드를 골라요:
트레이스에서 테스트 실행 만들기
테스트 실행을 열고, 앱의 트레이스를 테스트 케이스로 스트림하고, Confident AI가 각각을 트레이스·구성 요소 수준에서 평가하게 하세요 — API나 OpenTelemetry로.
URL에서 필터링된 뷰 만들기
필터가 이미 적용된 Confident AI 페이지를 여는 링크를 만드세요 — 공유하고, 북마크하고, CI에서 생성하세요.
이해관계자용 보고서 생성
리더십이 관심을 갖는 것을 계획하고, 커스텀 Executive Report 템플릿에 넣고, 큐레이팅된 보고서가 일정대로 이해관계자에게 닿도록 전달을 자동화해요.
MCP 서버 평가
MCP 호스트와 서버에 분산 트레이싱을 설정한 뒤, 배포 전에 에이전트가 데이터셋을 기준으로 올바른 도구를 올바른 인자로 호출하는지 평가해요.
코드에서 MCP 클라이언트 평가
MCP 서버를 설명하고, 클라이언트가 만든 도구 호출을 기록하고, 자체 코드에서 deepeval로 점수를 매겨 MCP 도구 호출이 로컬 함수와 분리되어 보이게 해요.
거버넌스 게이트로 레드팀 AI 에이전트 게이팅
수백 개 에이전트를 하나의 표준화된 배포 게이트로 통과시켜, 현재의 올바르게 구성된 레드팀 증거 없이는 어떤 에이전트도 배포되지 않게 해요.
관리에 Vibe Code 적용
confident-client Agent Skill을 설치하고 Cursor, Claude Code, Codex에서 Admin SDK를 구동해 — 프로젝트 생성, 멤버 초대, 키 프로비저닝을 평범한 영어 프롬프트로 해요.
에이전트용 프로젝트 즉석 프로비저닝
사용자가 만드는 각 에이전트마다 전용 Confident AI 프로젝트를 프로비저닝하고, 그 트레이스를 올바른 프로젝트로 라우팅해요.
클라이언트 자격 증명으로 AI 연결 인증
매 요청 전에 Confident AI가 Bearer 토큰을 가져오게 해서 OAuth2 보호 엔드포인트(Azure AD / Microsoft Entra ID 또는 Auth0)에 연결해요.
장기 실행 AI 연결 설정
AI 연결에서 Async Responses를 활성화하고 Confident API로 결과를 다시 게시해, 응답에 몇 분 걸리는 에이전트를 평가해요.
에어갭 환경에서 Confident Agent 설정
아웃바운드 전용 WebSocket Secure(WSS) 연결을 사용해 에어갭 또는 이그레스 제한 네트워크에 Confident Agent를 배포해요.
Custom Agent Skills로 온보딩 표준화
프로젝트별 온보딩·거버넌스 지침을 Claude Code, Codex, Cursor 등 코딩 에이전트에 제공해요.
흔한 구현 워크플로를 위한 추가 가이드는 시간이 지나며 추가될 예정이에요. 가이드를 요청하려면 지원팀에 문의해 주세요.
마이그레이션 가이드
confident-trace로 다른 플랫폼에서 트레이스를 옮겨요. 모든 가이드는 같은 단계를 따르고, 통화 후 $200 마이그레이션 크레딧을 제공해요:
Langfuse에서 Confident AI로 전환
confident-trace로 Langfuse의 OpenTelemetry 트레이스를 Confident AI로 옮겨요. 스팬, 제공자 클라이언트, 프레임워크는 그대로 남아요.
LangSmith에서 Confident AI로 전환
confident-trace로 LangSmith의 트레이스를 Confident AI로 옮겨요. LangChain과 LangGraph 스팬, 제공자 클라이언트, 프레임워크는 그대로 남아요.
Arize에서 Confident AI로 전환
confident-trace로 Arize Phoenix 또는 Arize AX의 트레이스를 Confident AI로 옮겨요. OpenTelemetry 스팬과 OpenInference 계측기는 그대로 남아요.
Braintrust에서 Confident AI로 전환
confident-trace로 Braintrust의 트레이스를 Confident AI로 옮겨요. OpenTelemetry 스팬, 제공자 클라이언트, 프레임워크는 그대로 남아요.