Паспорт AI-наблюдения: что сохранять кроме скриншота

Набор данных, который позволяет проверить ответ нейросети и корректно сравнить повторные замеры.

Почему скриншота недостаточно

На скриншоте может не быть начала диалога, режима, источников или части ответа. Через месяц невозможно понять, что именно спросил участник и почему система дала такой результат. Для исследования нужен паспорт наблюдения — запись условий вместе с исходными материалами.

Его задача не в том, чтобы собрать максимум данных о человеке. Достаточно сведений, которые нужны для понимания проверки. Не сохраняйте личную историю разговоров участника, если она не относится к согласованному исследованию.

Запишите вопрос и контекст

Сохраните точную формулировку, включая уточнения. Если вопрос задан в продолжение диалога, отметьте это и зафиксируйте относящийся к задаче контекст. Ответ на новый разговор и ответ после подробного обсуждения продукта нельзя считать одинаковыми условиями.

Укажите систему, интерфейс, доступный режим, язык, дату и время. Для пользовательского исследования добавьте согласованный регион и тип устройства. Если параметр неизвестен, запишите «не установлен». Предположение не должно выглядеть подтверждённым фактом.

Сохраните ответ целиком

Короткий фрагмент может убрать оговорку, которая меняет смысл рекомендации. Сохраняйте полный текст, а выделенную цитату используйте только для навигации в отчёте. Скриншот подтверждает отображение; текст позволяет искать формулировки и сравнивать записи.

  • Идентификатор сценария и номер проверки.
  • Точный вопрос и относящиеся к нему уточнения.
  • Полный ответ без редакторских исправлений.
  • Показанные ссылки и дата их проверки.
  • Скриншот и условия получения результата.
  • Оценка роли бренда с пояснением.

Не приписывайте неизвестные источники

Если система показывает ссылки, откройте их и проверьте, подтверждают ли они конкретное утверждение. Само наличие цитаты рядом с фразой не заменяет проверки содержания. У страницы могли измениться данные, а ссылка может относиться только к части ответа.

Если источники не показаны, так и отметьте. Не указывайте в отчёте случайную подходящую публикацию как причину ответа. Её можно назвать гипотезой для дальнейшего исследования, но нельзя выдать за доказанную связь.

Отделите данные от оценки

Оригинальный ответ хранится неизменным. Рядом располагается аналитическая разметка: присутствие, рекомендация, точность, риск и обоснование. Это позволяет другому специалисту проверить вывод, не пытаясь восстановить исходный материал из пересказа.

При повторном замере используйте тот же идентификатор сценария и новую дату наблюдения. Не перезаписывайте прошлую запись. История помогает увидеть, что изменилось в ответе, а что — в вопросе, интерфейсе или методике исследования.

Материал подготовлен редакцией PRORMadora. Методические рекомендации применяйте с учётом вашей задачи и правил конкретных площадок.
Получить предложение