Tworzenie/udoskonalanie inteligentnego głosowego robota na Asterisku

Jest robot głosowy w asterisk, napisany w php przez php-agi według schematu: "odtwarzanie nagrania"->"nagranie głosu abonenta"->"rozpoznawanie"->"wybór kontekstu dialplanu zgodnie z trafieniem słów kluczowych". Minusy obecnego robota. Słucha tylko po tym, jak sam powie, tzn. nie może w danym momencie reagować na reakcję abonenta. Używa gotowego zestawu nagrań do odtwarzania abonentowi, ponieważ nie można uzyskać wyraźnej mowy przy sztucznej syntezie. Zestaw słów dla możliwych wariantów odpowiedzi bez szkolenia i wstawiany ręcznie.
W obecnym projekcie używa rozpoznawania mowy przez kaldi.
Należy dopracować robota (lub stworzyć nowego), który będzie mógł w danym momencie reagować (zatrzymywać swoją mowę i rozpoznawać mowę abonenta) na słowa klienta i przechodzić na odpowiednie etapy dialplanu w zależności od odpowiedzi klienta. A także syntetyzować mowę pod mowę prawdziwego człowieka (aby nie można było odróżnić od robota)

Имеется голосовой робот в asterisk, написанный на php через php-agi по схеме: "проигрывание записи"->"запись голоса абонента"->"раcпознование"->"выбор контекста диалплана в соответствии с попаданием ключевых слов". Минусы текущего робота. Слушает только после того как сам скажет, т.е. не может в моменте реагировать на реакцию абонента. Использует готовый набор записей для озвучки абоненту, т.к. нельзя добиться четкой речи при искусственном синтезе. Набор слов для возможных вариантов ответов без обучения и вставляется вручную.
В текущем проекте использует распознавание речи через kaldi.
Необходимо доработать робота(или создать нового), который сможет в моменте реагировать(останавливать свою речь и распознавать речь абонента) на слова клиента и переходить на нужные ступени диалплана в зависимости от ответов клиента. А также синтезировать речь под речь реального человека (чтобы нельзя было отличить от робота)