# experiment-design

Скилл experiment-design помогает проектировать A/B-тесты, мультивариантные эксперименты и холдауты, чтобы результаты отвечали на поставленный вопрос.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode, Windsurf (Devin Desktop), Claude.ai · 285 установок · ★ 1107 у репозитория
- Автор: rampstackco
- Лицензия: MIT · policy=mirror · лицензия открытая, файл — в исходнике
- Исходник: https://github.com/rampstackco/claude-skills/tree/HEAD/skills/experiment-design/SKILL.md
- Обновлён: 2026-10-19
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/skills/rampstackco-experiment-design

## Что делает

Скилл предотвращает типичные ошибки экспериментирования: тесты против расплывчатых гипотез, подглядывание в результаты до окончания, игнорирование guardrails, стратификация в шум, отправку фич, чей lift — в основном ошибка измерения. Работает с любой платформой (Statsig, PostHog, GrowthBook, Optimizely, Amplitude, Eppo, Kameleoon).

Покрывает полный жизненный цикл: готовность к тесту (стоит ли это тестировать вообще), проектирование гипотезы (причина, эффект, величина, механизм), размер выборки и минимальный обнаружимый эффект (MDE), длительность (как долго достаточно, когда цикличность смещает результат), дисциплина запуска (no peeking, guardrails, sequential testing), интерпретация результатов и согласование с предварительно зафиксированным правилом решения.

Не включает оперативную механику feature flags (это скилл feature-flagging), статистическую глубину (delta methods, CUPED см. experimentation-analytics), платформо-специфичные инструменты (MCP-команды, auth, конфигурацию консультируй документацией платформы). Скилл проектирует эксперимент; платформа его реализует.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add rampstackco/claude-skills --skill experiment-design -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/experiment-design/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/experiment-design/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add rampstackco/claude-skills --skill experiment-design -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/experiment-design/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add rampstackco/claude-skills --skill experiment-design -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/experiment-design/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install rampstackco/claude-skills skills/experiment-design
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/experiment-design/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add rampstackco/claude-skills --skill experiment-design -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/rampstackco/claude-skills --path skills/experiment-design
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/experiment-design/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add rampstackco/claude-skills --skill experiment-design -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/rampstackco/claude-skills/tree/HEAD/skills/experiment-design/SKILL.md

## Когда брать
- сформулировать гипотезу с причиной, эффектом и механизмом
- рассчитать размер выборки и минимально обнаруживаемый эффект
- определить, сколько дней нужно тестировать без смещения цикличностью
- предзарегистрировать сегменты и правило решения перед запуском
- отличить статистически значимый результат от шума и ошибок измерения

## Примеры запросов агенту
- Помоги спроектировать A/B-тест для новой страницы оценки: сформулируй гипотезу, рассчитай MDE и длительность
- Я хочу тестировать рекомендуемый тариф вместо трёхуровневого сравнения. Какой размер выборки мне нужен?
- У нас есть результат теста. Как проверить, что он не просто ошибка измерения и что мы не подглядывали?

## Похожие
- [experiment-designer](https://affpapa.org/nevibecode/skills/experiment-designer.md) — скилл · 608 установок
- [experiment-design-kit](https://affpapa.org/nevibecode/skills/experiment-design-kit.md) — скилл · ★ 450 у репозитория
- [design-of-experiments](https://affpapa.org/nevibecode/skills/design-of-experiments.md) — скилл · 139 установок
- [agent-observability-online-experiment](https://affpapa.org/nevibecode/skills/agent-observability-online-experiment.md) — скилл · 170 установок
- [ab-testing](https://affpapa.org/nevibecode/skills/ab-testing.md) — скилл · 89300 установок
- [define-hypothesis](https://affpapa.org/nevibecode/skills/define-hypothesis.md) — скилл · 902 установки

## Другие версии с тем же именем
- [experiment-design · lingzhi227](https://affpapa.org/nevibecode/skills/experiment-design.md) — 1800 установок

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
