Low-Latency AI Voice Agent для обработки звонков в реальном врем

Разработал голосового AI-агента для автоматической обработки входящих звонков, консультаций клиентов и передачи заявок оператору.

Система работала по realtime pipeline:

Звонок → STT → AI Logic → TTS → голосовой ответ клиенту

Что было реализовано:
— подключение телефонии / SIP;
— распознавание речи в реальном времени;
— AI-логика диалога и обработки намерений;
— генерация голосового ответа через TTS;
— минимизация задержки между репликами;
— сценарии перевода на оператора;
— сохранение истории диалога;
— интеграция с CRM / Telegram / API;
— уведомления менеджерам о новых заявках.

Особое внимание уделялось:
— минимальной задержке ответа;
— естественности диалога;
— стабильной работе во время звонка;
— обработке перебиваний клиента;
— fallback-сценариям;
— контролю качества ответов.

Результат:
— AI-агент отвечает клиентам без оператора;
— снижена нагрузка на менеджеров;
— звонки автоматически классифицируются;
— заявки передаются в CRM/Telegram;
— система готова к масштабированию на несколько линий.

Технологии:
Python / Node.js, SIP / WebRTC, STT, TTS, LLM, WebSockets, Redis, CRM API, Telegram API