콘텐츠로 이동

빠른 시작

Python SDK의 실시간 에이전트는 WebSocket 전송 기반 OpenAI Realtime API 위에 구축된 서버 측 저지연 에이전트입니다.

베타 기능

실시간 에이전트는 베타입니다. 구현을 개선하는 과정에서 일부 호환성이 깨지는 변경이 있을 수 있습니다.

Python SDK 범위

Python SDK는 브라우저 WebRTC 전송을 제공하지 않습니다. 이 페이지에서는 서버 측 WebSocket을 통한 Python 관리 실시간 세션만 다룹니다. 서버 측 오케스트레이션, 도구, 승인, 텔레포니 통합에는 이 SDK를 사용하세요. 실시간 전송도 참고하세요.

사전 요구 사항

  • Python 3.10 이상
  • OpenAI API 키
  • OpenAI Agents SDK에 대한 기본적인 이해

설치

아직 설치하지 않았다면 OpenAI Agents SDK를 설치하세요.

pip install openai-agents

서버 측 실시간 세션 생성

1. 실시간 컴포넌트 가져오기

import asyncio

from agents.realtime import RealtimeAgent, RealtimeRunner

2. 시작 에이전트 정의

agent = RealtimeAgent(
    name="Assistant",
    instructions="You are a helpful voice assistant. Keep responses short and conversational.",
)

3. runner 구성

새 코드에는 중첩된 audio.input / audio.output 세션 설정 형태를 권장합니다. 새 실시간 에이전트의 경우 gpt-realtime-2로 시작하세요.

runner = RealtimeRunner(
    starting_agent=agent,
    config={
        "model_settings": {
            "model_name": "gpt-realtime-2",
            "audio": {
                "input": {
                    "format": "pcm16",
                    "transcription": {"model": "gpt-4o-mini-transcribe"},
                    "turn_detection": {
                        "type": "semantic_vad",
                        "interrupt_response": True,
                    },
                },
                "output": {
                    "format": "pcm16",
                    "voice": "ash",
                },
            },
        }
    },
)

4. 세션 시작 및 입력 전송

runner.run()은 RealtimeSession을 반환합니다. 세션 컨텍스트에 진입하면 연결이 열립니다.

async def main() -> None:
    session = await runner.run()

    async with session:
        await session.send_message("Say hello in one short sentence.")

        async for event in session:
            if event.type == "audio":
                # Forward or play event.audio.data.
                pass
            elif event.type == "history_added":
                print(event.item)
            elif event.type == "agent_end":
                # One assistant turn finished.
                break
            elif event.type == "error":
                print(f"Error: {event.error}")


if __name__ == "__main__":
    asyncio.run(main())

session.send_message()는 일반 문자열 또는 구조화된 실시간 메시지를 받습니다. 원문 오디오 청크의 경우 session.send_audio()를 사용하세요.

이 빠른 시작에 포함되지 않는 항목

주요 설정

기본 세션이 작동하면, 대부분의 사람들이 다음으로 찾는 설정은 다음과 같습니다.

  • model_name
  • audio.input.format, audio.output.format
  • audio.input.transcription
  • audio.input.noise_reduction
  • 자동 턴 감지를 위한 audio.input.turn_detection
  • audio.output.voice
  • tool_choice, prompt, tracing
  • async_tool_calls, guardrails_settings.debounce_text_length, tool_error_formatter

input_audio_format, output_audio_format, input_audio_transcription, turn_detection 같은 이전의 평면 별칭도 여전히 작동하지만, 새 코드에는 중첩된 audio 설정을 권장합니다.

수동 턴 제어에는 실시간 에이전트 가이드에 설명된 것처럼 원문 session.update / input_audio_buffer.commit / response.create 흐름을 사용하세요.

전체 스키마는 RealtimeRunConfig 및 RealtimeSessionModelSettings를 참고하세요.

연결 옵션

환경에서 API 키를 설정하세요.

export OPENAI_API_KEY="your-api-key-here"

또는 세션을 시작할 때 직접 전달하세요.

session = await runner.run(model_config={"api_key": "your-api-key"})

model_config는 다음도 지원합니다.

  • url: 사용자 지정 WebSocket 엔드포인트
  • headers: 사용자 지정 요청 헤더
  • call_id: 기존 실시간 호출에 연결합니다. 이 저장소에서 문서화된 연결 흐름은 SIP입니다.
  • playback_tracker: 사용자가 실제로 들은 오디오 양을 보고합니다

headers를 명시적으로 전달하면 SDK가 Authorization 헤더를 대신 삽입하지 않습니다.

Azure OpenAI에 연결할 때는 model_config["url"]에 GA Realtime 엔드포인트 URL과 명시적 헤더를 전달하세요. 실시간 에이전트에서는 레거시 베타 경로(/openai/realtime?api-version=...)를 피하세요. 자세한 내용은 실시간 에이전트 가이드를 참고하세요.

다음 단계