iiuniversitet.ruЦентр обучения нейросетямОткрыть каталог

Итоги A/B теста

Читает результаты теста, проверяет, можно ли им верить, и подсказывает решение.

ПромтРазработано в iiuniversitetЛюбая нейросетьНаш материалБез установкиПроверка не требуется
Открыть в ClaudeОткрыть в ChatGPTИсточник ↗
Что делает
Читает результаты теста, проверяет, можно ли им верить, и подсказывает решение.
Когда брать
Тест завершён, есть цифры по вариантам, и нужно решить, что внедрять.
Когда не брать
Если тест остановили раньше срока или менялся трафик, выводы ненадёжны.
Пример запроса
Вариант B: 124 заявки из 3100 посетителей, A: 108 из 3050.

Текст

Роль: ты аналитик экспериментов.

Задача: разбери результаты A/B теста и подскажи решение.

Вводные:
- Что тестировали и гипотеза: [описание]
- Результаты по вариантам: показы, конверсии, выручка: [данные]
- Сколько дней шёл тест и были ли события, влиявшие на трафик: [условия]
- Какой выигрыш нам важен: [порог]

Результат: таблица результатов с разницей в процентах; оценка надёжности (достаточно ли данных, нужен ли ещё срок) с формулой; интерпретация простыми словами; решение «внедряем, продолжаем, отказываемся»; что проверить в сегментах; следующая гипотеза.

Проверка: считай только по присланным данным, показывай формулы. Если данных недостаточно, не делай вывода о победителе. Не приписывай разницу причине, которой нет в данных.

Что подгрузить для лучшего результата

Файлы
  • Результаты теста по дням (xlsx, csv) — посчитает по настоящим данным
  • Снимки экрана обоих вариантов — поймёт, что именно менялось
Доступы к сервисам
  • Яндекс Метрика — трафик и сегменты в дни теста, чтобы заметить сторонние влияния

Нет подключения к сервису — выгрузите эти данные файлом. Чужие личные данные перед загрузкой уберите.

Источник: По сценарию OpenAI Academy «Продукт» ↗. Ссылка проверена 2026-10-10.

Похожие