ChatFireworks 통합

ChatFireworks 통합

LangChain JavaScript로 ChatFireworks 채팅 모델과 통합하는 방법을 안내할게요.

출처: 문서

본문

Fireworks AI는 모델을 실행하고 커스터마이즈하기 위한 AI 추론 플랫폼이에요. Fireworks가 서비스하는 전체 모델 목록은 Fireworks 문서를 참고하세요.

이 가이드는 ChatFireworks 채팅 모델을 시작하는 데 도움을 줘요. 모든 ChatFireworks 기능과 구성에 대한 자세한 문서는 API 레퍼런스를 참고하세요.

개요

통합 세부 정보

클래스 패키지 Serializable PY 지원 Downloads Version
ChatFireworks @langchain/fireworks ✅ ✅ NPM - Downloads NPM - Version

모델 기능

아래 표 헤더의 링크에서 특정 기능을 사용하는 방법에 대한 가이드를 확인할 수 있어요.

Tool calling Structured output Image input Audio input Video input Token-level streaming Token usage Logprobs
✅ ✅ ❌ ❌ ❌ ✅ ✅ ✅

설정

ChatFireworks 모델에 접근하려면 Fireworks 계정을 만들고 API 키를 받은 뒤 @langchain/fireworks 통합 패키지를 설치해야 해요.

자격 증명

Fireworks 웹사이트에서 Fireworks에 가입하고 API 키를 생성하세요. 완료되면 FIREWORKS_API_KEY 환경 변수를 설정하세요:

export FIREWORKS_API_KEY="your-api-key"

모델 호출의 자동 추적(tracing)을 원한다면 아래 주석을 해제해 LangSmith API 키를 설정할 수도 있어요:

# export LANGSMITH_TRACING="true"
# export LANGSMITH_API_KEY="your-api-key"

설치

LangChain ChatFireworks 통합은 @langchain/fireworks 패키지에 있어요:

```bash npm theme={"theme":{"light":"catppuccin-latte","dark":"catppuccin-mocha"}} npm install @langchain/fireworks @langchain/core ``` 
yarn add @langchain/fireworks @langchain/core

pnpm add @langchain/fireworks @langchain/core

인스턴스 생성

이제 모델 객체를 생성하고 채팅 완성을 생성할 수 있어요:

import { ChatFireworks } from "@langchain/fireworks"

const llm = new ChatFireworks({
    model: "accounts/fireworks/models/llama-v3p1-70b-instruct",
    temperature: 0,
    maxTokens: undefined,
    timeout: undefined,
    maxRetries: 2,
    // other params...
})

호출

const aiMsg = await llm.invoke([
    [
        "system",
        "You are a helpful assistant that translates English to French. Translate the user sentence.",
    ],
    ["human", "I love programming."],
])
aiMsg

AIMessage {
  "id": "chatcmpl-9rBYHbb6QYRrKyr2tMhO9pH4AYXR4",
  "content": "J'adore la programmation.",
  "additional_kwargs": {},
  "response_metadata": {
    "tokenUsage": {
      "completionTokens": 8,
      "promptTokens": 31,
      "totalTokens": 39
    },
    "finish_reason": "stop"
  },
  "tool_calls": [],
  "invalid_tool_calls": [],
  "usage_metadata": {
    "input_tokens": 31,
    "output_tokens": 8,
    "total_tokens": 39
  }
}

console.log(aiMsg.content)

J'adore la programmation.

API 레퍼런스

모든 ChatFireworks 기능과 구성에 대한 자세한 문서는 API 레퍼런스를 참고하세요.

[Connect these docs](/use-these-docs) to Claude, VSCode, and more via MCP for real-time answers. [Edit this page on GitHub](https://github.com/langchain-ai/docs/edit/main/src/oss/javascript/integrations/chat/fireworks.mdx) or [file an issue](https://github.com/langchain-ai/docs/issues/new/choose).

더 알아보기