Voice AI Assistant
Прототип голосового помощника для обзвона
MISSION BRIEF
Исследовательский прототип для первого звонка клиенту и уточнения заявки.
Событие из Kaiten запускает звонок через Mango. Звук передаётся в Yandex AI Studio Realtime для обработки речи и ответа.
Основная задача эксперимента: сократить паузы между репликами и проверить разговор с прерыванием ответа.
LOADOUT
SYSTEM MAP
CRM Trigger
Создание карточки клиента или сдвиг статуса
Call Dispatcher
Формирование контекста и вызов через АТС
Voice Stream Bridge
Двунаправленная потоковая передача аудио
Speech-to-Text
Потоковое распознавание речи пользователя
Dialogue LLM
Генерация реплики с учетом сценария разговора
Neural TTS
Синтез естественной речи и передача в канал связи
BOSS FIGHTS
Критичность задержки (latency): долгие паузы ломают ощущение живого диалога
Переход на потоковую передачу чанков аудио и использование быстрых моделей с прерыванием генерации при начале речи собеседника.
Достигнута комфортная задержка отклика в тестовых сценариях.• Работа с голосовым API и телефонией.
• Запуск сценариев из Kaiten.
• Статус проекта: исследовательский прототип.