Режим живого голосового общения на VEGA: разговоры в реальном времени с GPT-Live 1

Мы запустили Live — новый режим в VEGA для голосового общения с ИИ в реальном времени. На базе GPT-Live 1 от OpenAI (openai/gpt-live-1) режим Live позволяет говорить естественно на родном языке и мгновенно получать устные ответы — без набора промптов и ожидания отдельного конвейера распознавания речи.
Чем Live отличается от голосового диктования
Голосовое диктование превращает вашу речь в текст внутри поля ввода, чтобы вы могли отправить обычное письменное сообщение. Live — это полнодуплексная голосовая сессия: модель слушает и говорит по непрерывному аудиопотоку PCM с частотой 24 кГц.
- Говорите на родном языке: GPT-Live 1 определяет язык, на котором вы говорите, и отвечает на том же языке с естественным ритмом и интонацией.
- Плавное прерывание (barge-in): если вы начинаете говорить, пока VEGA ещё произносит ответ, воспроизведение сразу останавливается, и модель снова переходит в режим прослушивания — как в обычном телефонном разговоре.
- Живой эквалайзер в чате: 20-полосный аудиовизуализатор в реальном времени реагирует и на уровень вашего микрофона, и на голосовой вывод VEGA, так что вы всегда видите, слушает ли сессия, думает или говорит.
- Живые субтитры и история чата: сказанное расшифровывается по ходу разговора и сохраняется прямо в ветке чата — удобно для чтения или экспорта после завершения звонка.
Как это работает под капотом
Когда вы нажимаете Начать разговор в группе инструментов Live:
- VEGA создаёт на сервере одноразовый клиентский секрет и открывает прямую сессию WebSocket к Live-эндпоинту AI Gateway.
- Браузер захватывает звук микрофона через
AudioWorklet, пересэмплирует его в моно PCM16 с частотой 24 кГц и передаёт с минимальной задержкой. - Входящие аудио-дельты от
openai/gpt-live-1поэтапно планируются по кадрам в Web Audio API, а живые стенограммы поступают в интерфейс чата. - В любой момент можно выключить или включить микрофон либо завершить звонок, чтобы корректно закрыть сессию.
Тарификация по секундам
Сессии Live тарифицируются по фактической длительности в секундах с баланса VEGA, без округления до целых минут. Когда вы завершаете звонок, резерв списывается по точному времени сессии, переданному провайдером.
Попробуйте Live на VEGA
Откройте vega.chat, выберите Live на панели выбора инструментов и нажмите Начать разговор. Наденьте наушники или используйте микрофон устройства и говорите с VEGA на любом языке.