OpenAI выпустила GPT-Realtime-2 и новые voice-модели в API
OpenAI выпустила GPT-Realtime-2, Translate и Whisper в API. Что это значит для voice agents, rate limits и production reliability.
7 мая 2026 года OpenAI объявила о запуске трёх новых audio-моделей в API: GPT‑Realtime‑2, GPT‑Realtime‑Translate и GPT‑Realtime‑Whisper. Первоисточник: OpenAI — https://openai.com/index/advancing-voice-intelligence-with-new-models-in-the-api/
GPT‑Realtime‑2 — это модель для live voice-интерфейсов, где агент должен понимать речь, рассуждать, вызывать инструменты, обрабатывать исправления пользователя и продолжать диалог без пауз. OpenAI пишет, что модель поддерживает parallel tool calls, короткие голосовые preambles вроде «сейчас проверю», более устойчивое восстановление после ошибок, расширенный контекст до 128K и настраиваемый reasoning effort от minimal до xhigh.
GPT‑Realtime‑Translate предназначена для живого перевода речи: модель принимает более 70 входных языков и переводит в 13 выходных языков. GPT‑Realtime‑Whisper — новая streaming speech-to-text модель для низколатентной транскрибации, когда текст появляется по мере речи, а не после завершения фразы.
Use GPT‑Realtime‑2 when voice-агент должен не просто отвечать, а выполнять действия через tools в реальном времени. Use GPT‑Realtime‑Translate when продукту нужен multilingual support без отдельного цикла записи и дубляжа. Самый безопасный production-паттерн для voice AI — отделять realtime UX от слоя API-доступа, лимитов, ретраев и failover, потому что голосовой интерфейс особенно чувствителен к задержкам и 429-ошибкам.
Мнение API429: запуск новых realtime voice-моделей усиливает спрос на стабильный API-слой: голосовой агент ломается заметнее, чем текстовый чат, если запрос упирается в rate limits, холодный fallback или недоступность провайдера. Для API market это сдвиг от единичных LLM calls к длинным realtime sessions, где важны лимиты, стоимость минут, tool calling, retry strategy и observability. API429 здесь уместен как OpenAI-compatible gateway для production-команд: он помогает выносить маршрутизацию, контроль доступа, баланс и fallback за пределы приложения, чтобы voice workflows не зависели от одного прямого API-канала.
Подключим Gateway с управлением лимитами, платежами и отказоустойчивой маршрутизацией для OpenAI, Gemini и Anthropic.