프롬프트에 멀티모달 콘텐츠 포함하기

일부 애플리케이션은 PDF나 이미지에 대한 질문에 답할 수 있는 챗봇처럼 멀티모달 콘텐츠를 기반으로 합니다. 이런 경우 프롬프트에 멀티모달 콘텐츠를 포함하고 콘텐츠에 대한 질문에 답하는 모델의 능력을 테스트하고 싶을 거예요.

Playground는 프롬프트에 멀티모달 콘텐츠를 통합하는 두 가지 방법을 지원합니다:

인라인 콘텐츠(Inline content): 정적 파일(이미지, PDF, 오디오)을 프롬프트에 직접 임베드합니다. 프롬프트의 모든 사용에 동일한 멀티모달 콘텐츠를 일관되게 포함하고 싶을 때 이상적입니다. 예를 들어 모델의 응답을 근거로 삼는 데 도움이 되는 참조 이미지를 포함할 수 있습니다.
템플릿 변수(Template variables): 매번 다른 콘텐츠로 채울 수 있는 첨부 파일용 동적 플레이스홀더를 만듭니다. 이 접근 방식은 더 유연하며 다음을 할 수 있게 합니다:
- 모델이 다른 입력을 어떻게 처리하는지 테스트
- 다양한 콘텐츠로 동작하는 재사용 가능한 프롬프트 생성

참고: 모든 모델이 멀티모달 콘텐츠를 지원하지는 않습니다. Playground에서 멀티모달 기능을 사용하기 전에 선택한 모델이 사용하려는 파일 유형을 지원하는지 확인하세요.

출처: 문서

본문

멀티모달 콘텐츠를 추가할 메시지에서 파일 아이콘을 클릭합니다. Upload content 탭 아래에서 파일을 업로드해 프롬프트에 인라인으로 포함할 수 있습니다.

멀티모달 콘텐츠를 추가할 메시지에서 파일 아이콘을 클릭합니다. Template variables 탭 아래에서 특정 첨부 유형에 대한 템플릿 변수를 만들 수 있습니다. 현재는 이미지, PDF, 오디오 파일(.wav, .mp3)만 지원됩니다.

템플릿 변수를 추가한 뒤 화면 오른쪽 패널을 사용해 콘텐츠를 제공할 수 있습니다. + 버튼을 클릭해 템플릿 변수를 채우는 데 사용할 콘텐츠를 업로드하거나 선택합니다.

프롬프트를 수동으로 테스트한 뒤 평가를 실행해 골든 데이터셋 예제에 대해 프롬프트가 어떻게 수행되는지 확인할 수 있습니다.