Как разобрать отзывы клиентов с ИИ и понять, что улучшить

Как перейти от разрозненных реплик к понятным проблемам, вопросам для проверки и решениям команды.

В этой статье

Какой результат нужен от разбора отзывов

ИИ помогает разобрать отзывы клиентов: найти повторяющиеся затруднения, связать их с конкретными ситуациями и подготовить выводы для команды. Полезный результат объясняет, что люди пытались сделать, где возникла проблема и что стоит проверить дальше. Деление на положительные и отрицательные отзывы может быть частью работы, но для выбора улучшений его недостаточно.

Например, в поддержке несколько раз попросили экспорт. Команда может сразу решить, что нужен новый формат файла. Но одни пользователи не нашли существующую кнопку, у других скачивание завершилось ошибкой, а третьим действительно нужен CSV. Под общей темой скрываются разные задачи: сделать действие заметнее, исправить сбой или выяснить требования к формату.

Поэтому начните с вопроса, который сейчас стоит перед бизнесом. Для интернет-магазина это может быть причина возвратов конкретного товара, для сервиса — трудности после обновления, для поддержки — обращения, которые приходится разбирать повторно. Из такого вопроса понятно, какие отзывы собирать и что должно оказаться в итоговом документе.

Формат выбирайте под решение. Продуктовой команде нужен разбор затруднений с примерами и вопросами для исследования. Поддержке — частые причины обращений и темы, где стоит дополнить справку. Маркетологу — понятные формулировки пользы и сомнений клиентов. Смешать всё в один «анализ обратной связи» легко; использовать такой отчёт значительно сложнее.

Какие отзывы собрать и что к ним добавить

Подойдут обращения в поддержку, ответы на открытые вопросы анкеты, отзывы о товаре, заметки из клиентских разговоров. Сначала возьмите материалы одного периода и понятной темы. Если изучаете новую форму заказа, отделите отзывы до её изменения от отзывов после. Иначе агент может объединить проблему старой версии с впечатлениями от новой.

Сохраняйте текст целиком, когда соседние фразы меняют смысл. «Нужен CSV, а сам отчёт стал открываться быстрее» содержит и пожелание, и положительный опыт. Усреднённая тональность или одна метка потеряет часть сообщения. У каждого фрагмента полезно оставить дату, источник и ссылку либо номер обращения, чтобы вернуться к нему при обсуждении.

Контекст клиента тоже помогает: новый он или давно пользуется продуктом, что пытался сделать, какой версией пользовался. Передавайте только известные и нужные для вопроса сведения. Ненужные телефоны, адреса и платёжные данные удалите; для сопоставления обращений одного автора можно использовать внутреннее обезличенное обозначение.

Сообщения из разных каналов могут дополнять друг друга. В отзыве человек пишет «неудобный отчёт», а в обращении поддержки объясняет, что вручную переносит суммы в другую таблицу. Если связь между сообщениями известна, сохраните её. Без неё агенту стоит показать возможное совпадение, а не приписать одному человеку чужое объяснение.

На небольшом наборе обычный ИИ-чат может подготовить первый разбор. Агент становится полезнее, когда работа продолжается: приходится собирать доступные материалы, возвращаться к спорным сообщениям, сравнивать периоды и готовить разные документы по результатам. Специализированный сервис также может подойти: например, Dovetail Channels связывает обобщённые идеи с исходными свидетельствами. Возможность открыть основание вывода важнее красивого списка тем.

От слов клиента к понятной проблеме

Представим, что вы разбираете обратную связь об отчётах. В выгрузке оказались следующие строки. Буквы обозначают разных авторов, повтор R01 появился при выгрузке.

Материалы для разбора
ЗаписьТекст
R01 · автор A«Не нашёл экспорт»
R01 · автор AПовтор той же записи
R02 · автор A«Отчёт долго открывается»
R03 · автор B«Не нашёл экспорт»
R04 · автор C«Нужен CSV; отчёт открывается быстро»

Два автора не находят выгрузку. Это основание проверить, заметен ли путь к экспорту. Пока нельзя утверждать, что самой функции нет: пользователи могли искать её в другом месте. Запрос CSV относится к соседней теме, но не доказывает ту же проблему. А о скорости есть разные сообщения — медленную загрузку следует исследовать в условиях автора A.

Как реплика превращается в вопрос для команды

  1. Что сказали«Не нашёл экспорт»

    Две записи: R01 и R03

  2. Что это показываетПользователи не находят путь к выгрузке

    Причина ещё не установлена

  3. Что проверитьГде они искали действие

    Посмотреть сценарий и попросить показать затруднение

  4. Какое решение подготовитьИзменить расположение или объяснение, если гипотеза подтвердится

    Новый формат CSV рассмотреть отдельно

В выводе сохраняется смысл исходных фраз. Между наблюдением и изменением продукта есть проверяемая гипотеза.

Такой переход от наблюдения к выводу и следующему действию описан в методике анализа GOV.UK. При работе с ИИ полезно явно попросить эту связь: какую цитату агент использовал, что из неё следует и какой части ответа пока не хватает основания.

В примере после удаления точного дубля остаются четыре обращения от трёх авторов. Об экспорте говорят все трое, но две записи — о поиске действия, одна — о формате. Это описание данной выгрузки, а не доля всех клиентов. Похожие фразы от разных людей сохраняются; разные проблемы одного человека тоже не нужно склеивать в дубль.

Что передать команде вместо списка тем

Названия «экспорт», «скорость» и «интерфейс» помогают разложить сообщения, но сами по себе не подсказывают работу. Следующим поручением попросите агента подготовить короткую записку: проблема, основания, что пока неизвестно и какое действие позволит разобраться. По нашему набору получится такой материал для обсуждения:

Что обсудить по отзывам об отчётах
ВыводОснованиеСледующий шаг
Путь к экспорту стоит проверитьR01, R03: два автора не нашли действиеУточнить, где искали; посмотреть прохождение сценария
Есть отдельный запрос CSVR04: один автор назвал форматСпросить, в какую систему он переносит данные и какие поля нужны
Скорость загрузки требует уточнения условийR02 сообщает о задержке, R04 — о быстрой работеСравнить объём отчёта, время и среду; попробовать воспроизвести задержку

Для выбора приоритета попросите разобрать последствия. Проблема мешает завершить основное действие или требует лишнего клика? Есть ли обходной путь? Кого она затрагивает в собранных материалах? Повторяемость помогает оценить распространённость сигнала внутри набора, а последствия — срочность. Единственное сообщение о потере данных может требовать внимания раньше частого пожелания о цвете кнопки.

Необязательно заранее придумывать баллы важности. Если нет сведений о последствиях и охвате, полезнее получить вопросы, чем точный на вид рейтинг. Данные о поведении, обращения поддержки и разговоры с пользователями помогут решить, что исправлять. Intercom тоже рассматривает темы рядом с другими показателями — например, временем решения и удовлетворённостью. Число упоминаний не исчерпывает ситуацию.

Запрос функции стоит дополнительно раскрыть: что человек хочет сделать с её помощью? Просьба о CSV может означать регулярную передачу отчёта бухгалтеру или перенос данных в другую систему. Ответ повлияет и на формат, и на состав полей. Агент может составить вопросы для такого разговора, но не должен отвечать на них за клиента.

Поручение для анализа своей обратной связи

Этот текст подойдёт для подготовленной выгрузки или отзывов, вставленных в чат. Замените вопрос и сведения о продукте; не добавляйте желаемый вывод, который агент должен «найти».

Выводы из обратной связи
Разбери отзывы о [продукте/сценарии] за [период]. Нужно понять [вопрос для решения].
Материалы: [текст или доступный файл]. Контекст: [версия, изменения, известные особенности аудитории].
Найди повторяющиеся затруднения, запросы и положительный опыт. Различай проблему пользователя и предложенное им решение. В одном отзыве может быть несколько тем.
Для каждого вывода укажи исходные обращения и короткие цитаты. Отделяй сказанное клиентом от своей интерпретации. Не придумывай мотивы и последствия.
Точные дубли исключи и перечисли. Число обращений и авторов считай отдельно, если авторов можно надёжно сопоставить. Не распространяй доли в выгрузке на всех клиентов.
Подготовь записку команде: что происходит, кому и чем мешает по имеющимся сведениям, что стоит проверить, какие вопросы задать пользователям. Сохрани противоречащие примеры и редкие серьёзные сигналы.
Приоритеты предложи с объяснением; если оснований мало, назови недостающие сведения. Ответ верни в чат, клиентам не пиши и задачи в приложениях не создавай.
Следующим сообщением можно попросить подробнее разобрать одну тему.

Как превратить разбор в полезную привычку

Перед обсуждением перечитайте основания главных выводов. Частая ошибка — объединить сообщения по знакомому слову: проблемы с поиском кнопки и со скачиванием файла окажутся в общей теме «экспорт». Другая — потерять положительную часть смешанного отзыва. Если вывод кажется слишком широким, попросите показать входящие в него обращения и разделить разные ситуации.

После обсуждения зафиксируйте принятое решение: что команда проверяет, что исправляет и какие сведения собирает дополнительно. Тогда следующий разбор сможет ответить на новый вопрос: продолжают ли люди сталкиваться с тем же затруднением после изменения? Для сравнения сохраните определения тем и сопоставимые периоды. Рост числа сообщений в новой выгрузке сам по себе ещё не означает ухудшения — мог измениться канал или объём собранных материалов.

В отчёте стоит оставить и то, что работает хорошо. Если клиенты хвалят скорость подготовки отчёта, это помогает понять ценность, которую нельзя потерять при переделке экспорта. В результате команда получает конкретные основания для работы и вопросы для следующего разговора, а не ещё один документ с общими «инсайтами».

Источники