Меню
Тема

Годы моего участия:2025ИИ · Голосовое приложение

Vocal.Fun

Голосовое ИИ-приложение с нуля: живые разговоры, подключение кошелька и записи, которые можно скачать и отправить друзьям.

Моя роль
Проджект-менеджер и инженер-разработчик
Контекст
Клиентский проект · Разработка с нуля
Подробнее о проекте

Vocal.Fun позволяет находить голосовых агентов и разговаривать с ними через интерфейс с персонажами. Я работал проджект-менеджером и инженером-разработчиком, создавая фронтенд с нуля вместе с двумя коллегами.

Мы отвечали за всю фронтенд-часть: звонки, кошельки, скачивание и отправку записей. Работа с аудиопотоками и нагрузкой при записи была для меня особенно интересна — как и сама идея разговора с ИИ-персонажами.

Технологии
NuxtVueTypeScriptPiniaWeb Audio APISocket.IOFFmpeg.wasmEthers
  • Приложение и голосовые разговоры

    Вместе с двумя коллегами связал интерфейс персонажей с живыми звонками. Лично занимался интеграцией бэкенда, проверкой доступа к микрофону, обработкой ошибок и состояниями звонка.

  • Записи, которыми удобно делиться

    Создал скачивание и отправку разговоров в виде видео с портретом агента. Добавил Web Share API и ссылки на приложение в отправляемых сообщениях.

  • Кошельки и воспроизведение аудио

    Добавил подключение кошельков, доработал отображение баланса и создал переиспользуемый аудиосервис для звуков интерфейса и воспроизведения.

От живого аудиопотока к готовой записи

Живой звонок и сохранённая запись требуют разной обработки. Во время звонка приложение захватывает звук с микрофона, отправляет его через Socket.IO и воспроизводит входящий PCM-поток через Web Audio API. Экспорт добавляет кодирование в браузер, который уже занят аудио.

Для экспорта я использовал FFmpeg.wasm. Среда загружается при первом запросе и затем повторно используется для следующих скачиваний. Конвертация берёт записанные аудиоданные, кодирует звук и объединяет его с портретом агента в MP4.

Портрет масштабируется и дополняется полями без растягивания, а длительность видео соответствует записи. После успешного экспорта временные файлы удаляются из файловой системы FFmpeg в памяти. Готовое видео можно сохранить или отправить прямо из приложения.

Моя независимая практика

В независимой практике я работаю с клиентами и создаю собственные инструменты для разработчиков. В январе 2025 года открыл своё дело, опираясь на предыдущий проектный опыт. Отвечаю за архитектуру, разработку и выпуск; когда нужны дополнительные ресурсы, могу подключить дизайнеров и инженеров DeSource Labs.

Период работы Январь 2025 — настоящее время

  1. Индивидуальный предприниматель / консультант по разработке ПО

    Январь 2025 — настоящее время

Другие обязанности

Разработка продуктов и технический консалтинг в рамках собственного бизнеса.

  • Разрабатываю веб-приложения, фронтенд-системы и интеграции для клиентов: от технического планирования до реализации и передачи продукта.
  • Работаю над архитектурой ПО, планированием бэкенда и инфраструктуры, AI-интеграциями и блокчейн-приложениями.
  • Создаю и поддерживаю инструменты для разработчиков: Phone Mask, DeSource Image, Context7 Widget и Browser AI.
Полное резюме
Давайте обсудим

Какая у вас
задача?

Ищете инженера или технического руководителя? Планируете продукт или разбираетесь со сложной задачей? Расскажите, что нужно вашей команде.