# comparator

Субагент comparator проводит слепое сравнение двух результатов работы ИИ по единому промпту и находит победителя. Оценивает файлы или папки без предвзятости к методу генерации.

- субагент · `type=agent` · Claude Code, Codex, Cursor · ★ 406 у репозитория
- Автор: syahiidkamil
- Лицензия: не указана · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/syahiidkamil/Software-Engineer-AI-Agent-Atlas/tree/HEAD/.claude/skills/skill-creator/agents/comparator.md
- Обновлён: 2026-06-25
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/agents/comparator

## Что делает

Субагент берёт на вход пути к двум результатам, исходное задание и список проверочных ожиданий. Он не знает, какой инструмент создал вариант A, а какой — вариант B. Это исключает субъективность при оценке моделей или разных версий системного промпта.

Оценка строится по двум шкалам от 1 до 5: содержанию и структуре. Субагент анализирует точность, полноту, логику оформления и удобство чтения. Если заданы проверочные утверждения, он считает процент их выполнения как вторичный фактор. Ничью объявляет только при равных показателях.

Итоговый отчёт агент сохраняет в файл `comparison.json`. Внутри лежат баллы по десятибалльной шкале, списки сильных и слабых сторон каждого варианта и аргументация выбора.

## Установка

### Claude Code (родная платформа)

**Вручную: положить файлы**
- Файл: `.claude/agents/comparator.md` — Для всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию

### Codex

**Вручную: положить файлы**
- Файл: `.codex/agents/comparator.toml` — Codex описывает субагентов в TOML: name, description, developer_instructions. Текст из Markdown перенесите в developer_instructions вручную. Для всех проектов — ~/.codex/agents/

### Cursor

**Вручную: положить файлы**
- Файл: `.cursor/agents/comparator.md` — Cursor понимает и .claude/agents/

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/syahiidkamil/Software-Engineer-AI-Agent-Atlas/tree/HEAD/.claude/skills/skill-creator/agents/comparator.md

## Когда брать
- выбрать лучший вариант генерации из двух независимых прогонов
- составить объективную рубрику оценивания под конкретную задачу
- проверить выполнение списка критериев на сгенерированных файлах
- получить JSON-отчёт с разбором плюсов и минусов каждого решения

## Примеры запросов агенту
- Сравни результаты в папках `output_a` и `output_b` по задаче из файла `prompt.txt`
- Оцени два файла отчёта `report_a.md` и `report_b.md` и запиши вердикт в `comparison.json`
- Запусти слепое сравнение двух сборок с проверкой списка требований из `checklist.json`

## Похожие
- [bmad-eval](https://affpapa.org/nevibecode/skills/bmad-eval.md) — скилл · 9100 установок
- [llm-eval-harness](https://affpapa.org/nevibecode/skills/llm-eval-harness.md) — скилл · 438 установок
- [principle-explain-the-number](https://affpapa.org/nevibecode/skills/principle-explain-the-number.md) — скилл · 9200 установок
- [eval-runner](https://affpapa.org/nevibecode/skills/eval-runner.md) — скилл · ★ 54 у репозитория
- [eval-judge](https://affpapa.org/nevibecode/agents/eval-judge.md) — субагент · ★ 42780 у репозитория
- [perf-baseline-manager](https://affpapa.org/nevibecode/skills/perf-baseline-manager.md) — скилл · 2300 установок

Из того же набора: [syahiidkamil/software-engineer-ai-agent-atlas](https://affpapa.org/nevibecode/by/syahiidkamil/software-engineer-ai-agent-atlas.md) — 26 карточек

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
