Как измерять качество автоответов на отзывы: метрики и A/B

Почему «красивый ответ» — это не метрика

Когда команда поддержки читает свой ответ и думает «звучит вежливо», это ничего не говорит о том, как на ответ отреагирует покупатель — или алгоритм маркетплейса. Нужны измеримые критерии.

В AISA мы сделали три основные метрики качества. Они показываются в аналитике, и их можно сравнивать между разными шаблонами, стилями и версиями правил.

Метрика 1 — скорость ответа

Самая простая и самая недооценённая. Время от публикации отзыва до публикации ответа. У большинства магазинов на Wildberries и Ozon это больше 24 часов. У AISA — меньше 5 минут по умолчанию.

Почему это важно:

• покупатели, которые читают отзывы до покупки, видят «живой» магазин;
• алгоритмы маркетплейсов (особенно Ozon) явно поощряют карточки с быстрыми ответами в ранжировании;
• негативные отзывы до ответа висят «голыми» и портят впечатление на неделю-другую — за это время упускаются десятки заказов.

Метрика 2 — тональность ответа vs тональность отзыва

AISA размечает каждый отзыв по тональности (позитив / нейтральный / негатив) и каждый сформированный ответ — тоже. Идеально, когда ответ на негатив — конструктивно-эмпатичный (не оборонительный), а ответ на позитив — тёплый, не шаблонный.

Если в аналитике видно, что на 30% негативных отзывов ответы получаются «сухими» — это сигнал, что правила нужно подкрутить.

Метрика 3 — «второй заказ» после ответа

Это самая интересная метрика. AISA связывает отзыв, ответ и последующее поведение покупателя. Если покупатель сделал второй заказ в течение 60 дней после ответа, это засчитывается как «возвращённый клиент».

По нашим данным, у магазинов, которые внедрили автоответы с рекомендациями, доля возвращённых клиентов после негативных отзывов выше на 15–22%, чем у магазинов без ответов вообще. Это связано с тем, что покупатель видит: его мнение учли, его проблема решается.

Как делать A/B

В правилах ответов можно создавать «варианты стиля». Например:

• Вариант A — официальный, сдержанный, «вы».
• Вариант B — дружелюбный, тёплый, «ты» (или имя).

AISA распределяет отзывы между вариантами случайно (50/50) и через 2–3 недели показывает сравнение по метрикам выше.

На практике выясняется, что для одних категорий товаров (техника, пром-оборудование) работает «вы», для других (одежда, косметика, товары для дома) — «ты» или имя. Это знание нельзя получить из head-канала — только из эксперимента.

Что не нужно измерять

Избегайте метрик вида «сколько ответов в день» или «среднее количество слов». Они не коррелируют с конверсией. Фокус — на скорость, эмоциональную уместность и долгосрочный эффект возврата клиента.

---

Если вы уже пользуетесь AISA, эти метрики доступны на тарифах СТАНДАРТ и выше. Если нет — начните бесплатно.