Как оценить эффективность ИИ-консультанта на сайте
Обновлено
После установки ИИ-консультанта важно понять, приносит ли он результат. Субъективные впечатления ненадёжны, поэтому оценку строят на измеримых показателях. Ниже — набор метрик, которые помогут определить, окупает ли себя виртуальный помощник.
Количество диалогов
Первый показатель, который стоит отслеживать. Если посетители не начинают общение, проблема может быть в размещении виджета, в формулировке приветственного сообщения или в тематике ресурса. Рост числа диалогов после изменения промпта или позиции виджета подтверждает, что корректировка сработала.
Конверсия в обращения
Главная бизнес-метрика. Она показывает, какая доля диалогов завершилась передачей контактных данных посетителя. В CyberFAQ такие обращения фиксируются автоматически и отображаются в кабинете. Формула расчёта конверсии проста: число обращений делится на число диалогов и умножается на 100 %.
Доля перехваченных диалогов
Когда оператор вмешивается в разговор, это сигнал, что консультант не справился. Высокий процент перехватов указывает на пробелы в обучении: недостаточно документов, неточный промпт или вопросы за пределами базы знаний. Подробнее о настройке промпта — в статье «Как обучить ИИ-ассистента».
Расход сообщений
Показатель помогает спланировать тариф. Если лимит исчерпывается задолго до конца месяца, значит нагрузка растёт и пора рассмотреть переход на старший тарифный план. Динамика расхода также косвенно подтверждает интерес аудитории к виджету.
Периодичность проверки
Оптимальный интервал — раз в одну-две недели. Этого достаточно, чтобы заметить тренды и внести коррективы в промпт или документы. Подробные рекомендации по подготовке базы знаний описаны в статье «Работа с документами».
