# bench-experiment

Команда bench-experiment запускает раунд бенчмарка приложения Conduit и сравнивает результаты с предыдущими прогонами. Она пригодится, чтобы проверить экспериментальные изменения на рабочих ячейках.

- команда · `type=command` · Claude Code, Codex, GitHub Copilot, Gemini CLI · ★ 110 у репозитория
- Автор: alfredoperez
- Лицензия: MIT · policy=mirror · начало файла — в конце страницы
- Исходник: https://github.com/alfredoperez/speckit-companion/tree/HEAD/.claude/commands/bench-experiment.md
- Обновлён: 2026-10-19
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/commands/bench-experiment

## Что делает

Команда готовит ячейки бенчмарка, запускает драйверы и сбор метрик, затем сравнивает работу, oracle и wall-clock с прошлыми прогонами. В конце она фиксирует результаты в `speckit-sandboxes`: в том числе `stats.jsonl`, `history.jsonl`, `REPORT.md` и файлы запусков с обзорами.

Перед запуском команда проверяет каталог ячеек и активность Spotlight. Если Spotlight занят или маркерный файл отсутствует, раунд не начинается: нужно выполнить указанную команду `mdutil` и дождаться пользователя. Замеры запускаются без параллельных судей; после capture судей запускают небольшими партиями. Это важно, потому что совместный запуск нагрузки уже приводил к падению машины.

Для установки в Claude Code сохраните файл команды в `.claude/commands/bench-experiment.md`. Команда принимает описание эксперимента и флаги для размеров, режимов, версии расширения, spec-kit, модели и GUI-преамбулы. Сравнивая обычную сборку с Companion, используйте метрику `work`: `overall` включает lifecycle capture, которого у обычной сборки нет.

## Установка

### Claude Code (родная платформа)

**Вручную: положить файлы**
- Файл: `.claude/commands/bench-experiment.md` — Вызов — /bench-experiment. Для всех проектов — ~/.claude/commands/

### Codex

**Вручную: положить файлы**
- Файл: `~/.codex/prompts/bench-experiment.md` — Вызов — /prompts:bench-experiment. В Codex этот формат помечен устаревшим, замена — скиллы

### GitHub Copilot

**Вручную: положить файлы**
- Файл: `.github/prompts/bench-experiment.prompt.md`

### Gemini CLI

**Вручную: положить файлы**
- Файл: `.gemini/commands/bench-experiment.toml` — Gemini хранит команды в TOML: текст запроса — в поле prompt

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/alfredoperez/speckit-companion/tree/HEAD/.claude/commands/bench-experiment.md

## Когда брать
- сравнить результаты бенчмарка с предыдущими прогонами
- проверить экспериментальную версию расширения на выбранных размерах
- собрать метрики работы, oracle и wall-clock
- зафиксировать результаты раунда в `speckit-sandboxes`

## Примеры запросов агенту
- Запусти эксперимент «hook anchors» на всех размерах и сравни результаты с прошлыми прогонами.
- Проведи базовый повтор бенчмарка на `--ext code` и отчитайся по метрикам.
- Проверь Companion и обычную сборку по метрике `work`.

## Похожие
- [doca-bench](https://affpapa.org/nevibecode/skills/doca-bench.md) — скилл · 166 установок
- [bmad-eval](https://affpapa.org/nevibecode/skills/bmad-eval.md) — скилл · 9100 установок
- [benchmark-checklist](https://affpapa.org/nevibecode/skills/benchmark-checklist.md) — скилл · 9100 установок
- [verify-this](https://affpapa.org/nevibecode/skills/verify-this.md) — скилл · 2600 установок
- [perf-theory-tester](https://affpapa.org/nevibecode/skills/perf-theory-tester.md) — скилл · 2300 установок
- [add-lang](https://affpapa.org/nevibecode/skills/add-lang.md) — скилл · 1300 установок

Из того же набора: [alfredoperez/speckit-companion](https://affpapa.org/nevibecode/by/alfredoperez/speckit-companion.md) — 83 карточки

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
