experiment-design-kit — скилл для Claude Code
Скилл experiment-design-kit помогает превращать продуктовые идеи в проверяемые гипотезы с метриками, каталогом вариантов и защитными лимитами.
Apache-2.0 ★ 450 обновлён 2026-04-03
npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a claude-codeЧто делает experiment-design-kit
Скилл задаёт пятишаговый фреймворк для подготовки A/B-тестов и продуктовых экспериментов. Сначала формулируется проблема и главная метрика, затем гипотеза по шаблону «Если мы сделаем X для персоны Y, то ожидаем изменение Z». После этого составляется план измерений с расчётом мощности выборки, правилами таргетинга контрольной и тестовой групп, а также планом отката.
Внутри заложены готовые шаблоны: бриф эксперимента, матрица вариантов для интерфейсов или сообщений, чек-лист отката и структура еженедельного отчёта. Для приоритизации идей используется скоринг RICE или ICE с поправкой на стратегический фокус.
Перед запуском теста скилл требует зафиксировать защитные пороги метрик. Например, отклонение активации должно укладываться в диапазон ±3%, а просадка выручки на посетителя не может превышать 2% дольше 48 часов.
Какие задачи решает
- сформулировать проверяемую гипотезу с расчётом эффекта
- составить матрицу вариантов для разных экранов и сообщений
- задать защитные пороги метрик и правила аварийного отката
- подготовить еженедельный отчёт по запущенным тестам для руководства
Примеры запросов агенту
- Оформи бриф эксперимента по новой форме онбординга по шаблону experiment-design-kit
- Рассчитай защитные метрики и подготовь матрицу вариантов для теста страницы тарифов
- Собери еженедельный отчёт Weekly Experiment Packet по текущим запускам
Как установить experiment-design-kit
1Через Skills CLI (Vercel)
npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a claude-code2Вручную: положить файлы
~/.claude/skills/experiment-design-kit/SKILL.mdПапка скилла целиком; для одного проекта — .claude/skills/experiment-design-kit/
1Через Skills CLI (Vercel)
npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a codex2Вручную: положить файлы
.agents/skills/experiment-design-kit/SKILL.mdДля всех проектов — ~/.agents/skills/
1Через Skills CLI (Vercel)
npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a cursor2Вручную: положить файлы
.cursor/skills/experiment-design-kit/SKILL.mdCursor читает и .agents/skills/, и .claude/skills/
1GitHub CLI
gh skill install gtmagents/gtm-agents plugins/growth-experiments/skills/experiment-design-kit2Вручную: положить файлы
.github/skills/experiment-design-kit/SKILL.md1Через Skills CLI (Vercel)
npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a gemini-cli2Командой платформы
gemini skills install https://github.com/gtmagents/gtm-agents --path plugins/growth-experiments/skills/experiment-design-kitВручную: положить файлы
.devin/skills/experiment-design-kit/SKILL.mdСтарый путь .windsurf/skills/ тоже читается
Claude.ai
Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills
По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов
Вопросы об experiment-design-kit
Как установить experiment-design-kit в Claude Code?
Выполните в терминале команду npx skills add gtmagents/gtm-agents --skill experiment-design-kit -a claude-code. Файл навыка сохранится в ~/.claude/skills/experiment-design-kit/SKILL.md.
Для чего нужен experiment-design-kit?
Он структурирует подготовку продуктовых и маркетинговых тестов, помогая сразу описать контрольные группы, пороговые значения метрик и план отката изменений.
Какие защитные метрики предлагает этот набор?
В комплект входят ориентиры: удержание изменения активации в пределах ±3%, падение выручки на посетителя не более 2% за 48 часов и лимит тикетов поддержки ниже 5% от общего объёма.
Исходный текст
SKILL.md · Apache-2.0
--- name: experiment-design-kit description: Toolkit for structuring hypotheses, variants, guardrails, and measurement plans. --- # Experiment Design Kit Skill ## When to Use - Translating raw ideas into testable hypotheses with clear success metrics. - Ensuring experiment briefs include guardrails, instrumentation, and rollout details. - Coaching pods on best practices for multi-variant or multi-surface tests. ## Framework 1. **Problem Framing** – define user problem, business impact, and north-star metric. 2. **Hypothesis Structure** – "If we do X for Y persona, we expect Z change" with assumptions. 3. **Measurement Plan** – primary metric, guardrails, min detectable effect, power calc. 4. **Variant Strategy** – control definition, variant catalog, targeting, and exclusion rules. 5. **Operational Plan** – owners, timeline, dependencies, QA/rollback steps. ## Templates - Experiment brief (context, hypothesis, design, metrics, launch checklist). - Guardrail register with thresholds + alerting rules. - Variant matrix for surfaces, messaging, and states. - **GTM Agents Growth Backlog Board** – capture idea → sizing → prioritization scoring (ICE/RICE) @puerto/README.md#183-212. - **Weekly Experiment Packet** – includes KPI guardrails, qualitative notes, and next bets for Marketing Director + Sales Director. - **Rollback Playbook** – pre-built checklist tied to lifecycle-mapping rip-cord procedures. ## Tips - Pressure-test hypotheses with counter-metrics to avoid local optima. - Document data constraints early to avoid rework during build. - Pair with `guardrail-scorecard` to ensure sign-off before launch. - Apply GTM Agents cadence: Monday backlog groom, Wednesday build review, Friday learnings sync. - Require KPI guardrails per stage (activation, engagement, monetization) before authorizing build. - If a test risks Sales velocity, include Sales Director in approval routing per GTM Agents governance. ## GTM Agents Experiment Operating Model 1. **Backlog Intake** – ideas flow from GTM pods; Growth Marketer tags theme, objective, expected impact. 2. **Prioritization** – score with RICE + qualitative "strategic fit" modifier; surface top 3 bets weekly. 3. **Design & Instrumentation** – reference Serena/Context7 to patch code + confirm documentation. 4. **Launch & Monitor** – use guardrail-scorecard to watch leading indicators (churn, complaints, latency). 5. **Learning Loop** – run Sequential Thinking retro; document hypothesis, result, decision, follow-up in backlog card. ## KPI Guardrails (GTM Agents Reference) - Activation rate change must stay within ±3% of baseline for Tier-1 segments. - Revenue per visitor cannot drop more than 2% for more than 48h. - Support tickets tied to experiment variant must remain <5% of total volume. ## Weekly Experiment Packet Outline ``` Week Ending: <Date> 1. Portfolio Snapshot – tests live, status, KPI trend (guardrail vs actual) 2. Key Wins – hypothesis, uplift, next action (ship, iterate, expand) 3. Guardrail Alerts – what tripped, mitigation taken (rollback? scope adjust?) 4. Pipeline Impact – SQLs, ARR influenced, notable customer anecdotes 5. Upcoming Launches – dependencies, owners, open questions ``` Share packet with Growth, Marketing Director, Sales Director, and RevOps to mirror GTM Agents's cross-functional communication rhythm. ---
© gtmagents · Apache-2.0 · gtmagents/gtm-agents