# langchain-agent-monitoring

Скилл langchain-agent-monitoring для Claude Code помогает настроить мониторинг агентов в продакшене через онлайн-эвалюаторы LangSmith. Направляет оценки трейсов в очереди ревью и алерты.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode, Windsurf (Devin Desktop), Claude.ai · 285 установок · ★ 1354 у репозитория
- Автор: langchain-ai
- Лицензия: MIT · policy=mirror · лицензия открытая, файл — в исходнике
- Исходник: https://github.com/langchain-ai/langchain-skills/tree/HEAD/skills/langchain-agent-monitoring/SKILL.md
- Обновлён: 2026-11-21
- Проверка безопасности: автоматическая, 2026-11-17 (текст) — признаков вредоносного кода не нашли.
- HTML: https://affpapa.org/nevibecode/skills/langchain-agent-monitoring

## Что делает

Скилл помогает развернуть онлайн-оценку работы агентов и LLM-приложений в LangSmith. Он формулирует правила для отслеживания ошибок понимания или неподдерживаемых функций, разделяя проверку на уровень отдельного запуска или всей цепочки сообщений. Если трейсы не содержат `thread_id` или нужных метаданных, сначала требуется исправить разметку через `langchain-agent-tracing`.

Для снижения затрат на анализ потока скилл выстраивает двухэтапную схему. Сначала легковесная модель классификации отбирает подозрительные трейсы, а затем сложный LLM-судья подтверждает вердикт и пишет развёрнутое объяснение в отдельный ключ отзыва. Содержимое трейсов при этом оценивается как непроверенные данные, а не прямые инструкции.

Полученные оценки связываются с действиями в интерфейсе и CLI LangSmith. Результаты направляются в задачи поиска регулярных сбоев Insights, в очереди разметки для ручной проверки или на графики и алерты при превышении порога инцидентов.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add langchain-ai/langchain-skills --skill langchain-agent-monitoring -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/langchain-agent-monitoring/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/langchain-agent-monitoring/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add langchain-ai/langchain-skills --skill langchain-agent-monitoring -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/langchain-agent-monitoring/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add langchain-ai/langchain-skills --skill langchain-agent-monitoring -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/langchain-agent-monitoring/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install langchain-ai/langchain-skills skills/langchain-agent-monitoring
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/langchain-agent-monitoring/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add langchain-ai/langchain-skills --skill langchain-agent-monitoring -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/langchain-ai/langchain-skills --path skills/langchain-agent-monitoring
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/langchain-agent-monitoring/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add langchain-ai/langchain-skills --skill langchain-agent-monitoring -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/langchain-ai/langchain-skills/tree/HEAD/skills/langchain-agent-monitoring/SKILL.md

## Когда брать
- настроить онлайн-оценку агентов в LangSmith через LLM-судей
- сократить расходы на мониторинг с помощью двухэтапной цепочки эвалюаторов
- собрать очередь ручной разметки для подозрительных диалогов
- настроить алерты и задачи Insights на частые сбои агента

## Примеры запросов агенту
- Настрой онлайн-эвалюатор в LangSmith для поиска ошибок агента в трейсах
- Сделай двухэтапную проверку диалогов: модель классификации и отдельный LLM-судья
- Создай правило автоматизации для отправки сбойных трейсов в очередь разметки

## Похожие
- [langsmith-experiment-diagnosis](https://affpapa.org/nevibecode/skills/langsmith-experiment-diagnosis.md) — скилл · 184 установки
- [evals-start](https://affpapa.org/nevibecode/skills/evals-start.md) — скилл · 959 установок
- [agent-observability-build-eval-from-annotations](https://affpapa.org/nevibecode/skills/agent-observability-build-eval-from-annotations.md) — скилл · 254 установки
- [creating-online-evaluations](https://affpapa.org/nevibecode/skills/creating-online-evaluations.md) — скилл · 195 установок
- [langchain-architecture](https://affpapa.org/nevibecode/skills/langchain-architecture.md) — скилл · 13150 установок
- [langgraph-testing-evaluation](https://affpapa.org/nevibecode/skills/langgraph-testing-evaluation.md) — скилл · ★ 106 у репозитория

Из того же набора: [langchain-ai/langchain-skills](https://affpapa.org/nevibecode/by/langchain-ai/langchain-skills.md) — 25 карточек

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md
