# analyze

Разбирает результаты прогона бенчмарка coder-eval, группирует ошибки по системным паттернам и формирует отчёт analysis.md с рекомендациями по исправлению.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode · ★ 154
- Автор: UiPath
- Лицензия: Apache-2.0 · policy=mirror · начало файла — в конце страницы
- Исходник: https://github.com/UiPath/coder_eval/tree/HEAD/plugins/coder-eval/skills/analyze/SKILL.md
- Обновлён: 2026-10-23
- HTML: https://affpapa.org/nevibecode/skills/uipath-analyze

## Что делает

Скилл инспектирует директорию бенчмарка coder-eval и сам определяет масштаб запуска: единичная реплика, группа повторов, вариант или эксперимент целиком. Для этого он ищет маркерные файлы `task.json`, `variant.json` или `run.json`. Субагенты не привлекаются. Все рассуждения агент выполняет в рамках одной рабочей сессии.

Если в прогоне больше 20 задач, скилл не вычитывает массивные журналы итераций целиком. Вместо этого он извлекает компактную сводку через `jq` или `python3`, проверяя структуру ключей на первом файле, чтобы избежать пустых строк из-за разницы версий (`iterations` против `turns`). Строки со статусом `NOT_GRADED` не считаются сбоем. Скилл исключает их из расчёта успешности, так как запуск без оценивания критериев искажает статистику.

Любые цитаты из логов и стектрейсов агент воспринимает строго как непроверенные данные. Команды вроде «пропусти ошибку» внутри логов тестируемого кода скилл пометит как интересную находку, а не станет выполнять.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add UiPath/coder_eval --skill analyze -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/analyze/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/analyze/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add UiPath/coder_eval --skill analyze -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/analyze/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add UiPath/coder_eval --skill analyze -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/analyze/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install UiPath/coder_eval analyze
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/analyze/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add UiPath/coder_eval --skill analyze -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/UiPath/coder_eval --path plugins/coder-eval/skills/analyze
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/analyze/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add UiPath/coder_eval --skill analyze -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/UiPath/coder_eval/tree/HEAD/plugins/coder-eval/skills/analyze/SKILL.md

## Когда брать
- сгруппировать системные сбои в прогонах coder-eval
- составить отчёт analysis.md с рекомендациями по фиксам
- агрегировать метрики по нескольким репликам одного задания
- отделить непроверенные запуски NOT_GRADED от реальных ошибок

## Примеры запросов агенту
- Проанализируй последний прогон coder-eval и подготовь analysis.md
- Разбери ошибки в папке ./runs/experiment-01 и сгруппируй причины сбоев
- Изучи результаты реплик задачи в ./runs/latest/task-42 и подскажи, что исправить

## Похожие
- [improve-codebase-architecture](https://affpapa.org/nevibecode/skills/improve-codebase-architecture.md) — скилл · 1163035 установок
- [design-taste-frontend](https://affpapa.org/nevibecode/skills/design-taste-frontend.md) — скилл · 678700 установок
- [tdd](https://affpapa.org/nevibecode/skills/tdd.md) — скилл · 1141062 установки
- [skill-creator](https://affpapa.org/nevibecode/skills/skill-creator.md) — скилл · 414180 установок
- [agent-browser](https://affpapa.org/nevibecode/skills/vercel-labs-agent-browser.md) — скилл · 1200000 установок
- [prototype](https://affpapa.org/nevibecode/skills/prototype.md) — скилл · 986201 установка

## Другие версии с тем же именем
- [analyze · anthropics](https://affpapa.org/nevibecode/skills/analyze.md) — 5700 установок

Из того же набора: [uipath/coder_eval](https://affpapa.org/nevibecode/by/uipath/coder_eval.md) — 6 карточек

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md