К основному содержанию
скилл CX Codex

experiment-design · microsoft — скилл для Claude Code: дизайн экспериментов и MVE

Скилл experiment-design для Claude Code помогает превращать неизвестность в проверяемые гипотезы и отсеивать непроверяемые идеи, чтобы получить результат для принятия решения.

CC-BY-4.0 ★ 1 627 обновлён 2026-10-25

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add microsoft/hve-core --skill experiment-design -a claude-code
Открыть на GitHub

Что делает experiment-design

Скилл покрывает весь путь экспериментальной работы: превращает неизвестное в проверяемые гипотезы, отсеивает то, что экспериментом не является, и ограничивает объём так, чтобы результат был сравним и годился для решения.

Внутри пять справочных файлов. problem-framing.md переводит бизнес-исход в классы задач data science, mve-coaching.md ведёт по Minimum Viable Experiment, experiment-readiness.md помогает выбрать, какой эксперимент вообще запускать, а rpi-research-preparation.md готовит эксперимент с ограниченным prior art. Плюс provenance.md — про то, что взято из апстрима, а что является собственной конвенцией репозитория.

Два раздельных режима: framing классов задач показывает кандидатов, но никогда не выбирает за вас; эксперимент предполагает, что направление уже есть, и заканчивается выбором вместе с командой. Скилл применим не только к data science: data feasibility, архитектура, LLM, производительность, UX, прототипирование, железо.

Установка в Claude Code идёт одной командой, скилл появляется в ~/.claude/skills/experiment-design/SKILL.md.

Какие задачи решает

  • превратить бизнес-исход в проверяемую гипотезу
  • отсеять демо и мини-MVP, которые не являются экспериментом
  • выбрать эксперимент, результат которого изменит больше всего дальнейшей работы
  • зафиксировать неизвестные и риски так, чтобы другой человек мог повторить эксперимент
  • понять, какой класс задач data science стоит перед вами

Примеры запросов агенту

  • Разбери наш бизнес-исход на классы задач data science и покажи, какие кандидаты выжили после entry-тестов.
  • Помоги сформулировать гипотезу для Minimum Viable Experiment по направлению, которое мы уже выбрали.
  • Прочитай experiment-readiness.md и помоги выбрать, какой эксперимент запускать из нашего списка кандидатов.

Как установить experiment-design

1Через Skills CLI (Vercel)

npx skills add microsoft/hve-core --skill experiment-design -a claude-code

2Вручную: положить файлы

~/.claude/skills/experiment-design/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/experiment-design/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы об experiment-design

Как установить experiment-design в Claude Code?

Выполните npx skills add microsoft/hve-core --skill experiment-design -a claude-code. После установки скилл будет лежать в ~/.claude/skills/experiment-design/SKILL.md.

Что делает experiment-design?

Это справочный пакет для проектирования экспериментов: помогает переводить бизнес-исход в классы задач data science, формулировать и проверять гипотезы, выбирать эксперимент для запуска и готовить его к воспроизводимому выполнению.

Какие эксперименты он покрывает?

Любые: data feasibility, архитектура, LLM, производительность, use-case, UX, прототипирование и hardware. Не только data science.

Чем framing классов задач отличается от framing эксперимента?

Первый спрашивает, что это за проблема; второй — что тестировать в уже выбранном направлении. Скилл держит эти два режима раздельно и не применяет критерии ветеринга эксперимента к запросу на framing классов.

Исходный текст

SKILL.md · CC-BY-4.0
---
name: experiment-design
description: "Experiment design reference for problem-class framing, Minimum Viable Experiment coaching, hypothesis formation, vetting and red flags, and experiment readiness. Use when translating a stated business outcome into candidate data-science problem classes, or when framing, vetting, scoping, or evaluating an experiment of any kind, including data feasibility, architecture, LLM, performance, use-case, UX, prototyping, and hardware experiments."
license: CC-BY-4.0
user-invocable: false
metadata:
  authors: "Microsoft (MVE coaching synthesis); Microsoft (Code With Engineering Playbook); Google LLC (machine-learning problem framing)"
  spec_version: "1.1"
  last_updated: "2026-09-18"
  content_based_on: "HVE Core original MVE coaching material; HVE Core original cross-paradigm routing; https://microsoft.github.io/code-with-engineering-playbook/design/design-reviews/recipes/engineering-feasibility-spikes/; https://microsoft.github.io/code-with-engineering-playbook/design/design-reviews/trade-studies/; https://developers.google.com/machine-learning/problem-framing/problem; https://developers.google.com/machine-learning/guides/rules-of-ml"
---

# Experiment Design Reference Pack

## Goal

Support experiment work end to end: turning unknowns into testable hypotheses, screening out work that is not a real experiment, and scoping it so the result is comparable and decision-ready.

Support the step that precedes it as well: translating a stated business outcome into candidate data-science problem classes with the reasoning that produced them, so a practitioner knows what kind of problem is on the table before deciding what to test.

The two concerns stay distinct. Problem-class framing exposes candidates and never selects one. Experiment work assumes a candidate direction already exists and concludes by selecting an experiment with the team.

This pack is general purpose. It applies to data feasibility, architecture, LLM, performance, use-case, UX, prototyping, and hardware experiments, not to data science alone.

## Inputs

* The problem statement, customer context, and business driver
* The stated business outcome, when the active concern is problem-class framing
* Known unknowns, assumptions, and risks
* The decision the experiment is meant to unblock
* Prior experiment results, when a sequence of experiments is in flight

## Reference index

Read only the reference that matches the active concern.

| Reference                                                             | Read this when                                                                                                                                                                             |
|-----------------------------------------------------------------------|--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
| [problem-framing.md](references/problem-framing.md)                   | Translating a stated business outcome into candidate data-science problem classes, applying per-paradigm entry tests, ordering discriminating questions, or recording assignable gaps      |
| [mve-coaching.md](references/mve-coaching.md)                         | Framing an MVE, forming or sharpening hypotheses, applying vetting criteria and red flags, designing the experiment, evaluating results, or producing session and backlog-bridge artifacts |
| [experiment-readiness.md](references/experiment-readiness.md)         | Deciding which experiment to run at all: turning a risk landscape into candidates, prioritizing among competing unknowns, comparing options with evidence, or re-prioritizing mid-flight   |
| [rpi-research-preparation.md](references/rpi-research-preparation.md) | Preparing an experiment with bounded prior-art or current-constraint Research while keeping validation and experiment verdicts with their current owners                                   |
| [provenance.md](references/provenance.md)                             | Confirming what is upstream guidance, what is HVE Core derivation or repository convention, and where upstream is silent                                                                   |

A confirmed problem-class framing request reads [problem-framing.md](references/problem-framing.md) only. Experiment requests read [mve-coaching.md](references/mve-coaching.md) or [experiment-readiness.md](references/experiment-readiness.md) by concern.

## Success criteria

* Problem-class framing returns the surviving candidate problem classes with the entry-test reasoning that kept or discarded each one, and never returns a selection, a ranking, or a confidence score.
* Every framing claim is visibly either a cited entry test or repository-original routing, and no claim implies that a universal external standard governs cross-paradigm routing.
* An unanswered framing question becomes a recorded gap with an answer holder and a coordinator, and the remaining analysis continues.
* Each hypothesis is testable, specific, falsifiable, and tied to a stated rationale.
* The experiment selected is the one whose result changes the most downstream work, chosen from a candidate list rather than from the first idea proposed.
* Work that is a demo, a mini-MVP, or an already-answered question is named as such rather than run as an experiment.
* Every input that could change the result is recorded precisely enough that another person could repeat the experiment and get a comparable answer. An identifier without a version is a label, not a reproducible reference.
* Experiment scope stays minimum-but-sufficient, and experiment code is treated as disposable.

## Constraints

* Reproduce only the minimum text necessary for a specific technical point, and paraphrase everything else. Attribute every reference and describe accurately what each reference reproduces.
* Label repository conventions as substitutions rather than upstream recommendations.
* Keep experiment framing separate from experiment infrastructure. This pack decides whether and how an experiment is worth running; it does not stand up tooling.
* Keep problem-class framing separate from experiment framing. Problem-class framing asks what kind of problem this is; experiment framing asks what to test about a direction already chosen. Do not apply experiment vetting criteria, red flags, or readiness prioritization to a confirmed problem-class framing request.
* Never rank, score, threshold, or recommend a candidate problem class. The practitioner is the subject-matter expert who chooses.

## Ownership boundaries

| Concern                                                                                                                              | Owner                                                                              |
|--------------------------------------------------------------------------------------------------------------------------------------|------------------------------------------------------------------------------------|
| Candidate problem classes for a stated business outcome, entry-test reasoning, discriminating questions, and assignable framing gaps | This pack, through [problem-framing.md](references/problem-framing.md)             |
| Whether a proposed outcome is achievable with available data and evidence                                                            | `feasibility`, the evidence-led feasibility study reference                        |
| MVE session directory, artifact filenames, placement, and tracking-file hygiene                                                      | `experiment-designer.instructions.md`, applied automatically to MVE tracking paths |
| Phase order, gates, session writes, and coaching flow                                                                                | The consuming experiment agent                                                     |
| ML environments, reproducibility, tracking, model evaluation, abstractions, and readiness                                            | `ml-experimentation`, the ML-specific experimentation reference                    |
| Pipeline mechanics, data tiering, replay, validation, and DS/MLOps test technique                                                    | `dataops`, the DataOps and testing reference                                       |
| Metric names, instruments, units, cardinality, and PII-safe telemetry                                                                | `telemetry-foundations`, the OpenTelemetry-aligned instrumentation skill           |
| Data sensitivity classification and DPIA thresholds                                                                                  | `privacy-standards`, the privacy classification reference                          |

## Stop rules

* For a confirmed problem-class framing request, an unstated business outcome is the sole stop before candidate analysis. [problem-framing.md](references/problem-framing.md) owns that stop and its job-specific exceptions. The experiment stop rules below govern experiment requests only.
* Stop and name the red flag when the request is a demo, a scaled-down product build, or a question already answered elsewhere. Then offer either the falsifiable hypothesis hiding underneath it or an explicit non-experiment path, rather than halting on the refusal.
* Stop and separate concerns when the request is production implementation rather than experiment design.
* Stop and state the gap when the request depends on guidance this pack does not provide, such as a universal framework, tool, or metric choice made without project context.

## Attribution

This pack declares `CC-BY-4.0`.

[mve-coaching.md](references/mve-coaching.md) is repository-original content under CC BY 4.0. It is not derived from any upstream source and cites no upstream URL.

[problem-framing.md](references/problem-framing.md) layers three source treatments. Its machine-learning entry tests are informed by Google for Developers machine-learning guidance, licensed CC BY 4.0; that material is paraphrased and reorganized, both upstream URLs are cited, and changes are stated. It points readers to the NEOS Guide for optimization problem types as a citation only, and states no NEOS classification of its own. Its cross-paradigm routing, the broader analytical-fit judgement, and the gap and output contract are repository-original.

[experiment-readiness.md](references/experiment-readiness.md) is HVE Core guidance informed by two Microsoft CSE Code With Engineering Playbook documentation pages, which are licensed CC BY 4.0. It paraphrases rather than reproduces, generalizes the upstream practices beyond engagement-shaped engineering work, cites both upstream URLs, and states that changes were made.

See [provenance.md](references/provenance.md) for the consolidated source map and derivation labels.

© microsoft · CC-BY-4.0 · microsoft/hve-core

Похожие скиллы

Все скиллы по теме «Настройка агента: память, контекст, субагенты» →

Сначала — experiment-design от других авторов.

experiment-design lingzhi227 Скилл experiment-design разбивает план исследования на этапы, помогает выбрать базовые методы, датасеты и метрики. Пригодится при подготовке экспериментов для научной статьи. CX Codex +1 1 800установок experiment-design rampstackco Скилл experiment-design помогает проектировать A/B-тесты, мультивариантные эксперименты и холдауты, чтобы результаты отвечали на поставленный вопрос. CX Codex +1 285установок experiment-design Yeachan-Heo Скилл experiment-design для Claude Code описывает дизайн воспроизводимых экспериментов: от фиксации seed до пререгистрации плана анализа. Прогон и A/B-тест можно повторить у другого человека. CX Codex +1 1установок paper-reading-experiment-design franklee16 Скилл paper-reading-experiment-design для Claude Code превращает утверждения исследовательского метода в план экспериментов — от выбора задач и метрик до проверок и ответов на возражения рецензентов. CX Codex +1 ★ 240звёзд репо paper-planning EvoScientist Скилл paper-planning для планирования научной статьи до начала письма: сюжет, эксперименты, рисунки и график на 4 недели. CX Codex +1 434установок power-analysis gaasher Скилл power-analysis для Claude Code рассчитывает размер выборки для двухгруппового сравнения и помогает подготовить пререгистрацию. Включается при планировании A/B-теста, простого RCT или оценки двух моделей до сбора данных. CX Codex +1 ★ 185звёзд репо research-data-analysis hanhuark Скилл research-data-analysis помогает агенту построить базовый случай, проверить гипотезу и оформить результаты с неопределённостью и следами обработки данных. CX Codex +1 ★ 26звёзд репо experiment-bridge wanshuiyin Скилл experiment-bridge для Claude Code превращает план эксперимента в код, запускает его на GPU и собирает первые результаты для авто-ревью. CX Codex +1 555установок scientific-thinking Agents365-ai Скилл scientific-thinking для анализа научных данных, оценки доказательств и конструирования аргументов. Помогает различить факты от интерпретаций, рассмотреть альтернативные объяснения и сформулировать выводы с чётким указанием их границ. CX Codex +1 308установок

Из того же набора148

Весь набор →
Jira Backlog Executor Субагент Jira Backlog Executor выполняет переданный набор операций с Jira или возвращает результаты запросов. Работает с одним подтверждённым проектом. CX Codex +1 ★ 1 627звёзд репо Accessibility Reviewer Субагент Accessibility Reviewer для Claude Code профилирует репозиторий, проверяет доступность по WCAG 2.2 и ARIA APG, перепроверяет находки и составляет отчёт. CX Codex +1 ★ 1 627звёзд репо rpi-plan-critique Скилл rpi-plan-critique проводит независимую оценку плана реализации RPI без его изменения. Помогает проверить реализуемость задач и согласовать замечания перед стартом работы. CX Codex +1 ★ 1 627звёзд репо DT Learning Tutor Субагент DT Learning Tutor ведёт курс по Design Thinking: девять методов, проверки понимания после каждого модуля, темп под уровень ученика. CX Codex +1 ★ 1 627звёзд репо video-to-gif Скилл video-to-gif конвертирует видеофайлы в оптимизированные GIF через двухпроходной алгоритм FFmpeg. Помогает подготовить чёткие анимации интерфейса или превью прямо из терминала. CX Codex +1 ★ 1 627звёзд репо powershell Правило задаёт соглашения для скриптов, модулей и файлов данных PowerShell. Claude Code применяет их к файлам .ps1, .psm1 и .psd1. CX Codex +1 ★ 1 627звёзд репо PowerPoint Subagent Субагент PowerPoint Subagent для Claude Code извлекает содержимое презентаций, создаёт слайды по YAML-схеме, собирает колоды и проверяет их качество. Автоматизирует создание презентаций. CX Codex +1 ★ 1 627звёзд репо hve-slides Скилл hve-slides помогает создавать, обновлять и проверять интерактивные HTML-презентации в проекте HVE Core с поддержкой клавиатуры и режима докладчика. CX Codex +1 ★ 1 627звёзд репо

Спонсоры проекта

Компании, которые помогают держать аналитику открытой