# evalview-mcp

Сравнивает поведение ИИ-агента с сохранённым эталоном и помогает находить регрессии после изменений. Пригодится, чтобы проверять вызовы инструментов и ответы агента.

- MCP-сервер · `type=mcp` · Claude Code, Codex, Cursor, GitHub Copilot, Windsurf (Devin Desktop), Cline, Zed, Gemini CLI · ★ 140
- Автор: hidai25
- Лицензия: Apache-2.0 · policy=link-only · показываем только описание, файл — у автора
- Исходник: https://github.com/hidai25/eval-view
- Обновлён: 2026-10-16
- HTML: https://affpapa.org/nevibecode/mcp/evalview-mcp

## Что делает

EvalView сохраняет текущую работу агента как эталон, а затем сравнивает с ним новые результаты. Проверка учитывает инструменты, их параметры и порядок вызовов, а не только итоговый текст. Так можно заметить, что после правки промпта агент стал пропускать шаг или обращаться не к тому инструменту.

Сравнение последовательности вызовов работает локально и не требует API-ключа. Для оценки качества ответа можно добавить LLM-судью; выполнение самого агента при этом может тарифицироваться провайдером. Для настройки сервера через Claude Code в команде установки задаётся `OPENAI_API_KEY`, поэтому заранее подготовьте этот ключ.

## Требования
- Нужно: Python и uv (команды через uvx)
- Переменные окружения: `OPENAI_API_KEY` — это ключи и токены: значения спроси у человека, в репозиторий и общие файлы не записывай.

## Установка

### Claude Code (родная платформа)

**Командой платформы**
```bash
claude mcp add evalview-mcp -e OPENAI_API_KEY=<OPENAI_API_KEY> -- uvx evalview
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from evalview <команда>

### Codex

**Командой платформы**
```bash
codex mcp add evalview-mcp --env OPENAI_API_KEY=<OPENAI_API_KEY> -- uvx evalview
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from evalview <команда>

### Cursor

**Файл настроек**
Файл `.cursor/mcp.json`:
```json
{
    "mcpServers": {
        "evalview-mcp": {
            "command": "uvx",
            "args": [
                "evalview"
            ],
            "env": {
                "OPENAI_API_KEY": "<OPENAI_API_KEY>"
            }
        }
    }
}
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from evalview <команда>

### GitHub Copilot

**Файл настроек**
Файл `.vscode/mcp.json`:
```json
{
    "servers": {
        "evalview-mcp": {
            "type": "stdio",
            "command": "uvx",
            "args": [
                "evalview"
            ],
            "env": {
                "OPENAI_API_KEY": "<OPENAI_API_KEY>"
            }
        }
    }
}
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from evalview <команда>

### Gemini CLI

**Командой платформы**
```bash
gemini mcp add -e OPENAI_API_KEY=<OPENAI_API_KEY> evalview-mcp uvx evalview
```
Вместо <…> подставьте свои значения. uvx запускает команду с именем пакета; если в README она другая — uvx --from evalview <команда>

## Когда брать
- сравнить работу агента с сохранённым эталоном
- найти изменение порядка вызовов инструментов
- заметить падение качества ответа после правки
- проверить агента перед слиянием изменений

## Примеры запросов агенту
- Сравни поведение моего агента с сохранённым эталоном через `evalview-mcp`.
- Проверь, изменились ли инструменты или порядок их вызовов у агента.
- Оцени, не просело ли качество ответов агента после последнего изменения.

## Похожие
- [Front-End Checklist](https://affpapa.org/nevibecode/mcp/front-end-checklist.md) — MCP-сервер · ★ 74559
- [Keploy](https://affpapa.org/nevibecode/mcp/keploy.md) — MCP-сервер · ★ 18727
- [SeleniumBase MCP](https://affpapa.org/nevibecode/mcp/seleniumbase-mcp.md) — MCP-сервер · ★ 13169
- [mobile-mcp](https://affpapa.org/nevibecode/mcp/mobile-mcp.md) — MCP-сервер · ★ 9946
- [e2e](https://affpapa.org/nevibecode/mcp/e2e.md) — MCP-сервер · ★ 11912
- [mockserver](https://affpapa.org/nevibecode/mcp/mockserver.md) — MCP-сервер · ★ 4996

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md