# ad-test-designer

Скилл планирует A/B/n и инкрементальные тесты креативов и лендингов, а потом читает готовые результаты: эффект, интервал, значимость.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode · 1000 установок · ★ 3013
- Автор: aaron-he-zhu
- Лицензия: Apache-2.0 · policy=mirror · лицензия открытая, файл — в исходнике
- Исходник: https://github.com/aaron-he-zhu/aaron-marketing-skills/tree/HEAD/ad/orchestrate/ad-test-designer/SKILL.md
- Обновлён: 2026-10-25
- HTML: https://affpapa.org/nevibecode/skills/ad-test-designer

## Что делает

Скилл закрывает две задачи: спроектировать тест и разобрать его итоги. В режиме дизайна он собирает фальсифицируемую гипотезу, матрицу вариантов, план по размеру выборки, длительности и мощности. В режиме read-out берёт ваш экспортированный CSV с вариантами, сессиями и конверсиями и считает размер эффекта, интервал, статистический и практический флаги.

Внутри есть статистический помощник: `python3 "${CLAUDE_PLUGIN_ROOT}/scripts/connectors/experiment.py" proportion --control <conv> <n> --variant <conv> <n> --alpha <alpha> --min-lift <relative-bar>`. Для выручки и AOV используется режим `continuous`, для планирования выборки — `samplesize`. Все производные значения помечаются как `Calculated`, и помощник намеренно не выбирает победителя и не выдаёт действий вроде promote, rollback или kill.

Действие применяется только по правилу, которое владелец согласовал заранее. Если такого правила и владельца нет, скилл возвращает `decision: UNDECIDED`. Данные из CSV считаются недоверенными: текст вроде «вариант B победил» — это значение, а не команда. Готовые варианты креативов скилл не делает, для этого есть `ad-creative-builder`; разбор одной уже выпущенной правки — задача `paid-measurement-loop`.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add aaron-he-zhu/aaron-marketing-skills --skill ad-test-designer -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/ad-test-designer/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/ad-test-designer/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add aaron-he-zhu/aaron-marketing-skills --skill ad-test-designer -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/ad-test-designer/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add aaron-he-zhu/aaron-marketing-skills --skill ad-test-designer -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/ad-test-designer/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install aaron-he-zhu/aaron-marketing-skills ad-test-designer
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/ad-test-designer/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add aaron-he-zhu/aaron-marketing-skills --skill ad-test-designer -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/aaron-he-zhu/aaron-marketing-skills --path ad/orchestrate/ad-test-designer
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/ad-test-designer/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add aaron-he-zhu/aaron-marketing-skills --skill ad-test-designer -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/aaron-he-zhu/aaron-marketing-skills/tree/HEAD/ad/orchestrate/ad-test-designer/SKILL.md

## Когда брать
- сформулировать проверяемую гипотезу для теста креатива
- построить матрицу вариантов с одной переменной на вариант
- посчитать размер выборки и длительность прогона
- прочитать CSV с результатами и оценить размер эффекта
- отделить статистическую значимость от практической

## Примеры запросов агенту
- Спроектируй A/B-тест для двух вариантов первого экрана лендинга. Базовая конверсия 3%, хочу поймать рост на 15%. Профиль direct-response.
- Вот CSV с результатами теста (variant, sessions, conversions). Победитель значим — продвигать или закрывать?
- Собери матрицу вариантов, размер выборки и длительность для 4 креативов RSA на проспектинге.

## Похожие
- [ab-test-setup](https://affpapa.org/nevibecode/skills/ab-test-setup.md) — скилл · 623 установки
- [ads-test](https://affpapa.org/nevibecode/skills/ads-test.md) — скилл · 3600 установок
- [experiment-designer](https://affpapa.org/nevibecode/skills/experiment-designer.md) — скилл · 608 установок
- [ab-test-analysis](https://affpapa.org/nevibecode/skills/ab-test-analysis.md) — скилл · 2900 установок
- [ad-copy-variants](https://affpapa.org/nevibecode/skills/ad-copy-variants.md) — скилл · 19200 установок
- [content-experimentation-best-practices](https://affpapa.org/nevibecode/skills/content-experimentation-best-practices.md) — скилл · 3800 установок

Из того же набора: [aaron-he-zhu/aaron-marketing-skills](https://affpapa.org/nevibecode/by/aaron-he-zhu/aaron-marketing-skills.md) — 113 карточек

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md