AIKraft/AI/Войти
AIKraft/Skills/ab-test-setup

ab-test-setup

Помогает планировать и настраивать A/B-тесты, сплит-тесты и программы экспериментов. Включает расчет размера выборки, выбор метрик и анализ статистической значимости.

coreyhaines31 official Данные ★ 53k

Что делает навык

Skill помогает проектировать статистически значимые A/B-тесты и программы экспериментов, обеспечивая валидность результатов. Он охватывает этапы от формулировки гипотезы и расчета выборки до анализа метрик и интеграции результатов в программу роста.

Когда применять

  • Планирование первого A/B-теста для повышения конверсии на странице с учетом текущих объемов трафика
  • Расчет необходимого размера выборки и длительности теста для обнаружения заданного эффекта
  • Выбор первичных, вторичных и guardrail-метрик для оценки влияния изменений на бизнес-показатели
  • Построение системы непрерывных экспериментов (ICE-приоритизация, плейбук, регулярный обзор)

Как работает

  1. Проверить наличие файла контекста продукта (.agents/product-marketing-context.md или .claude/product-marketing-context.md) и использовать его данные
  2. Сформулировать гипотезу по структуре: причина, изменение, ожидаемый результат, аудитория и критерий успеха
  3. Определить тип теста (A/B, A/B/n, MVT, Split URL) и выбрать один изменяемый параметр
  4. Рассчитать размер выборки на основе базовой конверсии и желаемого эффекта (используя калькуляторы или таблицы)
  5. Выбрать метрики: первичную (связанную с гипотезой), вторичные (для контекста) и guardrail (для предотвращения вреда)
  6. Настроить техническую реализацию (client-side или server-side) и проверить корректность отслеживания

Примеры запросов агенту

«У нас конверсия в регистрацию 3%, трафик 10 000 визитов в день. Мы хотим увеличить размер кнопки CTA. Рассчитай размер выборки для обнаружения эффекта 10% и предложи гипотезу»
«Помоги выбрать метрики для теста на странице ценообразования. Первичная метрика — выбор тарифа. Какие вторичные и guardrail-метрики стоит отслеживать?»
«Как построить программу экспериментов для нашей команды? Опиши цикл эксперимента, как использовать ICE-приоритизацию и какие метрики скорости (velocity) отслеживать»

Что понадобится

  • Наличие файла контекста продукта: .agents/product-marketing-context.md или .claude/product-marketing-context.md (если существует)

Описание составлено по SKILL.md навыка, сверено 05.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «coreyhaines31-ab-test-setup» из репозитория: # https://github.com/coreyhaines31/marketingskills
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r coreyhaines31-ab-test-setup/ ~/.claude/skills/coreyhaines31-ab-test-setup/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.