План A/B теста
Составляет план теста: гипотеза, метрика, размер выборки, срок и критерий решения.
ПромтРазработано в iiuniversitetЛюбая нейросетьНаш материалБез установкиПроверка не требуется
- Что делает
- Составляет план теста: гипотеза, метрика, размер выборки, срок и критерий решения.
- Когда брать
- Хотите проверить изменение на сайте, в рассылке или рекламе и не обмануться случайностью.
- Когда не брать
- При малом трафике (меньше 100 пользователей на вариант в неделю) тест даст шум.
- Пример запроса
- Проверить два заголовка на странице записи на вебинар, трафик 300 человек в неделю.
Текст
Роль: ты специалист по экспериментам в маркетинге и продукте. Задача: составь план A/B теста, по которому можно принять решение. Вводные: - Что тестируем и зачем: [изменение, цель] - Главная метрика и её текущее значение: [метрика] - Трафик или аудитория в неделю: [число] - Ограничения по срокам: [срок] - Что считаем успехом: [условие успеха] Результат: гипотеза в формате «если..., то..., потому что...»; варианты A и B; метрика и дополнительные показатели; сколько нужно данных и сколько недель идти; как разделить аудиторию; правило остановки; что делать при любом исходе. Проверка: если трафика мало для статистически значимого вывода, скажи об этом и предложи альтернативу. Не обещай результата. Не меняй несколько вещей в одном тесте.
Что подгрузить для лучшего результата
- Файлы
- Выгрузка посещаемости и конверсий по неделям (xlsx, csv) — посчитает срок теста по реальным цифрам
- Скриншоты страницы, письма или рекламы, которые меняете — предложит конкретные варианты A и B
- Доступы к сервисам
- Яндекс Метрика — текущая конверсия и трафик по неделям
Нет подключения к сервису — выгрузите эти данные файлом. Чужие личные данные перед загрузкой уберите.
Источник: По сценарию OpenAI Academy «Продукт» ↗. Ссылка проверена 2026-10-10.