メインコンテンツへスキップ
/chat/completions エンドポイントを使用してチャット補完を作成します。このエンドポイントは、メッセージの送信とレスポンスの受信について OpenAI 形式に準拠しています。

​
要件

チャット補完 を作成するには、以下を指定します。
  • Inference サービスのベース URL: https://api.inference.wandb.ai/v1
  • W&B APIキー: <your-api-key>
  • オプション: W&B チームとプロジェクト: <your-team>/<your-project>
  • 利用可能なモデル から選択したモデル ID

​
リクエスト例

import openai

client = openai.OpenAI(
    # カスタムのベースURLは W&B Inference を指しています
    base_url='https://api.inference.wandb.ai/v1',

    # https://wandb.ai/settings で APIキー を作成します
    # 安全のため、代わりに環境変数 OPENAI_API_KEY として設定することを検討してください
    api_key="<your-api-key>",

    # オプション: 使用状況をトラッキングするための チーム とプロジェクト
    project="<your-team>/<your-project>",
)

# <model-id> を、利用可能なモデル一覧にある任意のモデル ID に置き換えます
response = client.chat.completions.create(
    model="<model-id>",
    messages=[
        {"role": "system", "content": "<your-system-prompt>"},
        {"role": "user", "content": "<your-prompt>"}
    ],
)

print(response.choices[0].message.content)

​
レスポンス形式

API は、OpenAI 互換形式のレスポンスを返します。 
{
  "id": "chatcmpl-...",
  "object": "chat.completion",
  "created": 1234567890,
  "model": "meta-llama/Llama-3.1-8B-Instruct",
  "choices": [
    {
      "index": 0,
      "message": {
        "role": "assistant",
        "content": "Here's a joke for you..."
      },
      "finish_reason": "stop"
    }
  ],
  "usage": {
    "prompt_tokens": 25,
    "completion_tokens": 50,
    "total_tokens": 75
  }
}