EFRION · AI

Голосовой AI-ассистент, который работает в любой веб-ERP

EFRION AI Autopilot — расширение Chrome, которое выполняет голосовые запросы в любой веб-ERP без интеграции на стороне клиента.

Клиент: EFRION
Год: 2026
Наша роль: Разработка
Услуга: AI-разработка
Отрасль: Enterprise Software
Сайт: ai.efrion.com
Состав работ: Расширение Chrome · Голосовой интерфейс · Бэкенд на FastAPI с двусторонним WebSocket · Шесть действий на странице · План на экране и анимированный курсор · Отмена и блокировка безопасности
Использованные технологии: Chrome extensionFastAPIGemini Live APIWebSocketAudioWorklet

Главная страница EFRION AI Autopilot: заголовок Your AI Copilot for Any ERP System рядом с макетом экрана счетов ERP, который заполняет ассистент. — Страница продукта на ai.efrion.com.

Задача

Работа в ERP — это много экранов и много полей, а ассистенту обычно нужна интеграция с каждой системой. EFRION, компании, которая делает B2B-софт, нужен был ассистент, работающий в любой веб-ERP как она есть: без настройки, без интеграции и без API-ключей на стороне клиента.

Что мы сделали

Сделали ассистента как расширение Chrome на Gemini Live: пользователь произносит запрос, а расширение передаёт звук.
Настроили отправку модели снимка экрана каждые 1,5 секунды вместе с упрощённым деревом доступности страницы.
Связали расширение с бэкендом на FastAPI двусторонним WebSocket, и бэкенд превращает вызовы функций модели в шесть действий на странице: нажать, ввести текст, прокрутить, перейти, прочитать и подсветить.
Научили ассистента показывать план на экранной панели до действия и отмечать каждую цель анимированным курсором до нажатия.
Добавили проверку после каждого нажатия: если страница не изменилась, ассистент пробует другой способ.
Добавили голосовую команду «отменить», которая откатывает последнее из десяти действий, и необязательную блокировку безопасности с подтверждением перед отправкой, удалением или уходом со страницы.