Создание BankMitra: мое 10-дневное путешествие в голосовой AI с Murf Falcon

Введение Создание BankMitra: мое 10-дневное путешествие по голосовому AI За последние 10 дней я создал BankMitra, голосового помощника по финансовым услугам в рамках программы Murf AI «10 дней голосовых агентов — VoiceForBharat Edition». Идея была проста: облегчить доступ к финансовой и правительственной информации посредством естественного голосового разговора. Вместо навигации по сложным веб-сайтам или попыток понять длинные формы пользователи могут просто поговорить с BankMitra и задать свои вопросы на английском, хинди или хинглиш. BankMitra использует LiveKit для голосовой связи в реальном времени, LLM для рассуждений, Deepgram для преобразования речи в текст и Murf Falcon для преобразования текста в речь. Но проект стал гораздо большим, чем просто говорящий чат-бот. Решая эту задачу, я постепенно добавлял память, реальные данные и инструменты, исходящие телефонные звонки, эскалацию людей, аналитику звонков и, наконец, специалиста по государственным схемам, которому BankMitra может передавать разговоры, когда запрос требует более специализированной помощи. То, что начиналось как базовый голосовой агент, превратилось в полноценную голосовую систему поддержки клиентов. Попутно я понял, что создание надежного голосового агента — это нечто большее, чем просто