Главная / Портфолио / Голосовая анкета

Голосовая анкета с AI-распознаванием

Инновационная система голосового заполнения кредитных анкет с использованием нейросетей и умной обработкой данных

Интерфейс голосовой анкеты

О проекте

Клиент — агрегатор кредитных и рассрочных решений, который сотрудничает с множеством банков и финансовых организаций. Компания помогает клиентам подобрать оптимальный вариант кредитования, отправляя заявку сразу в несколько банков и выбирая лучшие условия.

Проблема: Процесс заполнения кредитной анкеты требовал ввода большого количества данных вручную — ФИО, паспортные данные, адрес регистрации, контакты, место работы и многое другое. Это занимало много времени и снижало конверсию — многие пользователи бросали заявку на середине.

Решение: Мы разработали инновационную систему голосового заполнения анкеты, где пользователь может надиктовывать ответы голосом, а искусственный интеллект автоматически распознаёт речь, обрабатывает данные и заполняет нужные поля.

Технологическая сложность:

  • Использование нескольких нейросетей для разных задач
  • Синтез речи для озвучивания вопросов
  • Распознавание речи и преобразование в текст
  • Умная обработка адресов через DaData API
  • Валидация телефонов, email и других данных
  • Распознавание паспортных данных через Biorg

Реализованный функционал

01

Интерактивный голосовой интерфейс

Разработали современный интерфейс для комфортного голосового взаимодействия:

  • Визуализация записи — анимированный индикатор при записи голоса
  • Поэтапное заполнение — вопросы задаются последовательно
  • Контроль процесса — возможность пропустить, повторить или исправить ответ
  • Прогресс-бар — отображение процента заполнения анкеты
  • Мгновенная обратная связь — показ распознанного текста в реальном времени
  • Редактирование — возможность исправить текст вручную после распознавания
  • Адаптивность — комфортная работа на смартфонах и планшетах
  • Альтернативный ввод — возможность переключиться на обычную клавиатуру

Интерфейс интуитивно понятен даже для пользователей, не знакомых с голосовыми технологиями.

02

Text-to-Speech: озвучивание вопросов

Интегрировали нейросеть для синтеза естественной человеческой речи:

  • Качественная озвучка — приятный голос, похожий на живого оператора
  • Естественные интонации — правильные ударения и паузы
  • Разная скорость — пользователь может настроить темп речи
  • Управление воспроизведением — пауза, повтор вопроса
  • Контекстные подсказки — система озвучивает примеры ответов
  • Многоязычность — поддержка русского и английского языков

Использовали современные TTS-модели для максимально естественного звучания. Голос не отличить от записанного диктором.

03

Speech-to-Text: распознавание голоса

Внедрили мощную нейросеть для преобразования речи в текст:

  • Высокая точность — 95%+ корректного распознавания
  • Работа с акцентами — понимание различных произношений
  • Фильтрация шумов — распознавание в условиях фонового шума
  • Распознавание чисел — правильное преобразование цифр и дат
  • Специальные термины — обучение на финансовой лексике
  • Real-time обработка — мгновенное отображение результата
  • Коррекция ошибок — автоматическое исправление очевидных опечаток
  • Контекстное понимание — учёт контекста вопроса при распознавании

Нейросеть обучена на специфике финансовых документов и понимает терминологию кредитования.

04

Умная обработка адресов через DaData

Интегрировали API DaData для стандартизации адресов:

  • Распознавание формата — система понимает любой способ произнесения адреса
  • Стандартизация — приведение к единому формату (почтовый индекс, регион, город, улица, дом, квартира)
  • Проверка существования — валидация реальности адреса по базе ФИАС
  • Автодополнение — подсказки при неполном адресе
  • Разбиение на компоненты — автоматическое заполнение отдельных полей (индекс, регион, город и т.д.)
  • Исправление ошибок — коррекция неправильно произнесённых названий
  • Геокодирование — получение координат адреса
  • Проверка актуальности — выявление переименованных улиц

Например, если пользователь говорит "Москва Ленинский проспект 15 корпус 2 квартира 45", система автоматически разложит это на: Индекс, Город: Москва, Улица: Ленинский проспект, Дом: 15, Корпус: 2, Квартира: 45.

05

Интеллектуальная валидация данных

Создали систему умной проверки и форматирования различных типов данных:

  • Распознавание телефонов — автоматическое форматирование в +7 (XXX) XXX-XX-XX
  • Проверка email — валидация корректности адреса электронной почты
  • Распознавание дат — преобразование любого формата в DD.MM.YYYY
  • ИНН и СНИЛС — проверка контрольных сумм
  • Паспортные серия и номер — форматирование и валидация
  • Банковские карты — проверка корректности номера по алгоритму Луна
  • Суммы и проценты — правильное распознавание финансовых данных

Система автоматически определяет тип данных и применяет соответствующую валидацию и форматирование.

06

Распознавание паспорта через Biorg

Интегрировали систему Biorg для автоматического извлечения данных из фото паспорта:

  • Загрузка фото — пользователь делает снимок паспорта на камеру телефона
  • OCR-распознавание — автоматическое считывание всех текстовых полей
  • Извлечение данных — ФИО, дата рождения, серия, номер, код подразделения, дата выдачи
  • Проверка подлинности — выявление поддельных документов
  • Проверка качества — система просит переснять при плохом освещении или нечёткости
  • Автозаполнение формы — все данные автоматически распределяются по полям анкеты
  • Верификация — сверка данных с базами МВД
  • Защита данных — шифрование фотографий документов

Это избавляет пользователя от необходимости вручную вводить все паспортные данные — достаточно одной фотографии.

07

Отправка заявок в банки

После заполнения анкета автоматически отправляется в партнёрские банки:

  • Множественная отправка — заявка уходит сразу в несколько банков
  • API-интеграции — автоматический обмен данными с банковскими системами
  • Скоринг — предварительная оценка вероятности одобрения
  • Подбор условий — сравнение предложений от разных банков
  • Отслеживание статуса — информирование клиента о результатах
  • Электронная подпись — возможность подписать договор онлайн

Технологический стек

AI & ML

  • Text-to-Speech (TTS) API
  • Speech-to-Text (STT) нейросеть
  • Biorg OCR система
  • DaData API
  • NLP обработка текста

Frontend

  • Vue.js
  • Web Audio API
  • MediaRecorder API
  • WebSocket (real-time)

Backend

  • PHP
  • Nginx

Безопасность

  • SSL/TLS шифрование
  • Шифрование данных
  • Токенизация API
  • Соответствие 152-ФЗ
  • Безопасное хранение ПДн

Результаты проекта

3x
Ускорение
заполнения анкеты
95%
Точность
распознавания
65%
Рост конверсии
в заявку
10 мин
Время заполнения
вместо 30

Внедрение голосовой анкеты кардинально изменило процесс подачи кредитных заявок. Время заполнения сократилось с 30 до 10 минут — пользователям больше не нужно вручную вводить десятки полей с данными.

Ключевые достижения проекта:

  • Разработана инновационная система голосового заполнения форм с использованием AI
  • Интегрированы несколько нейросетей для синтеза и распознавания речи
  • Реализована умная обработка адресов через DaData с автоматической стандартизацией
  • Внедрена система Biorg для мгновенного извлечения данных из фото паспорта
  • Создана интеллектуальная валидация телефонов, email и других типов данных
  • Обеспечена безопасность обработки персональных данных согласно 152-ФЗ

Конверсия в заполненную заявку выросла на 65% — многие пользователи, которые раньше бросали форму на середине, теперь доходят до конца благодаря удобству голосового ввода. Особенно это важно для мобильных устройств, где печатать длинные тексты неудобно.

Нейросеть распознавания речи показывает точность 95%+, что сравнимо с профессиональными транскрибаторами. Интеграция с DaData позволяет корректно обрабатывать даже сложные адреса с нестандартным произношением.

Система Biorg для распознавания паспортов полностью автоматизировала ввод документов — достаточно сделать одно фото, и все поля заполняются автоматически. Это экономит до 5 минут на каждую анкету.

Клиент получил конкурентное преимущество на рынке агрегаторов кредитов благодаря инновационному подходу к UX.

Нужна AI-автоматизация процессов?

Разработаем решения на базе нейросетей для автоматизации рутинных операций. Распознавание речи, обработка документов, интеллектуальная валидация данных — внедрим искусственный интеллект в ваш бизнес.

Наши контакты
Адрес: г.Ульяновск, ул.Федерации 56, офис 26
Телефон: +7 905 036 8836
Email: info@ag-group.tech
Telegram: @aggrouptech
Презентация о компании
Скачать