# grader

Субагент grader оценивает результаты работы агентов по стенограмме и файлам, проверяет утверждения и находит слепые зоны в тестах.

- субагент · `type=agent` · Claude Code, Codex, Cursor · ★ 406 у репозитория
- Автор: syahiidkamil
- Лицензия: не указана · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/syahiidkamil/Software-Engineer-AI-Agent-Atlas/tree/HEAD/.claude/skills/skill-creator/agents/grader.md
- Обновлён: 2026-06-25
- Проверка безопасности: автоматическая, 2026-11-16 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/agents/grader

## Что делает

Субагент сопоставляет список ожиданий с реальным ходом выполнения задачи. На вход ему передают путь к стенограмме в формате Markdown, директорию с полученными файлами и перечень условий. Он изучает артефакты напрямую, а не верит отчёту исполнителя на слово. Если файл создан, но пуст или содержит некорректные данные, проверка помечается как проваленная: поверхностное совпадение здесь считается ошибкой.

Помимо стандартного списка условий, `grader` извлекает скрытые утверждения о фактах, процессе и качестве работы из логов, сверяя их с содержимым файлов. Если в папке лежит `user_notes.md`, агент считывает сомнения исполнителя и учитывает их в итоговом вердикте. Все результаты вместе со статистикой вызовов инструментов и метриками времени сохраняются в файл `grading.json`.

Бремя доказательства лежит на проверяемом условии: при любых сомнениях или нехватке данных агент выставляет `FAIL`. Он также критикует саму систему тестирования, если формулировка проверки слишком мягкая и пропускает ошибочный результат.

## Установка

### Claude Code (родная платформа)

**Вручную: положить файлы**
- Файл: `.claude/agents/grader.md` — Для всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию

### Codex

**Вручную: положить файлы**
- Файл: `.codex/agents/grader.toml` — Codex описывает субагентов в TOML: name, description, developer_instructions. Текст из Markdown перенесите в developer_instructions вручную. Для всех проектов — ~/.codex/agents/

### Cursor

**Вручную: положить файлы**
- Файл: `.cursor/agents/grader.md` — Cursor понимает и .claude/agents/

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/syahiidkamil/Software-Engineer-AI-Agent-Atlas/tree/HEAD/.claude/skills/skill-creator/agents/grader.md

## Когда брать
- сопоставить результаты исполнения со списком требований
- выявить поверхностные прохождения тестов при некорректных данных
- извлечь и проверить неявные утверждения из логов и файлов
- найти пробелы и слабые формулировки в тестовых сценариях
- сформировать сводный отчёт `grading.json` с метриками выполнения

## Примеры запросов агенту
- Проверь выполнение задачи по стенограмме `eval_run.md` и файлам в папке `output_dir`
- Оцени с помощью grader, соответствует ли сгенерированный отчёт в `dist/` списку требований
- Проанализируй транскрипт сессии и найди слабые места в текущих проверках

## Похожие
- [bmad-eval](https://affpapa.org/nevibecode/skills/bmad-eval.md) — скилл · 9100 установок
- [eval-harness](https://affpapa.org/nevibecode/skills/eval-harness.md) — скилл · 6500 установок
- [adk-evals](https://affpapa.org/nevibecode/skills/adk-evals.md) — скилл · 1700 установок
- [inngest-agent-evals](https://affpapa.org/nevibecode/skills/inngest-agent-evals.md) — скилл · 635 установок
- [simulations](https://affpapa.org/nevibecode/skills/simulations.md) — скилл · 161 установка
- [creating-skills](https://affpapa.org/nevibecode/skills/osmontero-creating-skills.md) — скилл · 101 установка

Из того же набора: [syahiidkamil/software-engineer-ai-agent-atlas](https://affpapa.org/nevibecode/by/syahiidkamil/software-engineer-ai-agent-atlas.md) — 26 карточек

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
