コンテンツにスキップ

使用状況

Agents SDK は、すべての実行ごとにトークン使用状況を自動追跡します。実行コンテキストから参照でき、コストの監視、制限の適用、分析の記録に利用できます。

追跡対象

  • requests: 実行された LLM API 呼び出し数
  • input_tokens: 送信された入力トークン合計
  • output_tokens: 受信した出力トークン合計
  • total_tokens: 入力 + 出力
  • details:
  • input_tokens_details.cached_tokens
  • output_tokens_details.reasoning_tokens

実行からの使用状況の取得

Runner.run(...) の後、result.context_wrapper.usage から使用状況にアクセスします。

result = await Runner.run(agent, "What's the weather in Tokyo?")
usage = result.context_wrapper.usage

print("Requests:", usage.requests)
print("Input tokens:", usage.input_tokens)
print("Output tokens:", usage.output_tokens)
print("Total tokens:", usage.total_tokens)

実行中のすべてのモデル呼び出し(ツール呼び出しやハンドオフを含む)にわたって、使用状況は集計されます。

LiteLLM モデルでの使用状況の有効化

LiteLLM プロバイダーはデフォルトでは使用状況メトリクスを報告しません。LitellmModel を使用する場合、エージェントに ModelSettings(include_usage=True) を渡すと、LiteLLM のレスポンスが result.context_wrapper.usage に反映されます。

from agents import Agent, ModelSettings, Runner
from agents.extensions.models.litellm_model import LitellmModel

agent = Agent(
    name="Assistant",
    model=LitellmModel(model="your/model", api_key="..."),
    model_settings=ModelSettings(include_usage=True),
)

result = await Runner.run(agent, "What's the weather in Tokyo?")
print(result.context_wrapper.usage.total_tokens)

セッションでの使用状況の取得

Session(例: SQLiteSession)を使用する場合、Runner.run(...) の各呼び出しは、その特定の実行の使用状況を返します。セッションはコンテキスト用に会話履歴を保持しますが、各実行の使用状況は独立しています。

session = SQLiteSession("my_conversation")

first = await Runner.run(agent, "Hi!", session=session)
print(first.context_wrapper.usage.total_tokens)  # Usage for first run

second = await Runner.run(agent, "Can you elaborate?", session=session)
print(second.context_wrapper.usage.total_tokens)  # Usage for second run

セッションは実行間で会話コンテキストを保持しますが、各 Runner.run() 呼び出しで返される使用状況メトリクスはその実行だけを表します。セッションでは、以前のメッセージが各実行の入力として再投入されることがあり、その結果、後続のターンで入力トークン数に影響します。

フックでの使用状況の利用

RunHooks を使用している場合、各フックに渡される context オブジェクトには usage が含まれます。これにより、重要なライフサイクル時点で使用状況をログできます。

class MyHooks(RunHooks):
    async def on_agent_end(self, context: RunContextWrapper, agent: Agent, output: Any) -> None:
        u = context.usage
        print(f"{agent.name}{u.requests} requests, {u.total_tokens} total tokens")

API リファレンス

詳細な API ドキュメントは以下を参照してください。

  • Usage - 使用状況追跡のデータ構造
  • RunContextWrapper - 実行コンテキストから使用状況へアクセス
  • RunHooks - 使用状況追跡のライフサイクルへのフック