К основному содержанию
скилл CX Codex

exploring-mcp-tool-quality — скилл для Claude Code

Скилл exploring-mcp-tool-quality разбирает качество вызовов MCP-инструментов в PostHog: долю ошибок, задержки, охват и самые проблемные тулы.

лицензия не указана 202 установок ★ 101 обновлён 2026-10-24

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add PostHog/ai-plugin --skill exploring-mcp-tool-quality -a claude-code
Открыть на GitHub

Что делает exploring-mcp-tool-quality

Скилл разбирает качество вызовов MCP-инструментов в PostHog. Источник один: MCP-сервер, инструментированный SDK MCP-аналитики PostHog, шлёт событие $mcp_tool_call в общую таблицу events. Отдельной таблицы нет, все поля лежат свойствами $mcp_*, а метрики считаются агрегацией по этому событию.

По одному инструменту скилл идёт в типизированные запросы: posthog:query-mcp-tool-stats принимает toolName и dateRange и отдаёт вызовы, ошибки, p50/p95, пользователей и сессии, posthog:query-mcp-tool-failures раскладывает сообщения об ошибках по типам. Сравнить инструменты между собой нечем, кроме HogQL через posthog:execute-sql. Перед цифрой по доле сбоев скилл проверяет управляемую метрику mcp_tool_call_fail_pct в posthog:metric-list и, если она одобрена, запускает её через posthog:data-catalog-metric-run.

Две вещи ломают ручные запросы. Группировка по сырому имени тула прячет реальные инструменты под обёрткой одиночного вызова, поэтому берут эффективное имя из $mcp_exec_tool_call_name. Свойства хранятся строками, так что $mcp_is_error читается через toBool. Без диапазона времени запрос сканирует всю таблицу events, а без порога по числу вызовов наверх вылезет тул с тремя вызовами и 100% ошибок.

Какие задачи решает

  • найти MCP-инструмент с самой высокой долей ошибок
  • отделить редкие сбои от массовых: сопоставить процент ошибок с числом вызовов
  • посмотреть p50 и p95 задержки по конкретному тулу
  • разобрать, на каких типах ошибок падает инструмент
  • собрать матрицу качества: ошибки, задержки и охват в одной таблице

Примеры запросов агенту

  • Какой MCP-инструмент чаще всего падает за последние 30 дней?
  • Разбери, почему падает <tool>: покажи типы ошибок и сообщения под ними.
  • Собери матрицу качества по всем MCP-тулам: доля ошибок, p50, p95 и охват.

Как установить exploring-mcp-tool-quality

1Через Skills CLI (Vercel)

npx skills add PostHog/ai-plugin --skill exploring-mcp-tool-quality -a claude-code

2Вручную: положить файлы

~/.claude/skills/exploring-mcp-tool-quality/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/exploring-mcp-tool-quality/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы об exploring-mcp-tool-quality

Как установить exploring-mcp-tool-quality в Claude Code?

Выполните npx skills add PostHog/ai-plugin --skill exploring-mcp-tool-quality -a claude-code. Файл скилла появится по пути ~/.claude/skills/exploring-mcp-tool-quality/SKILL.md.

Что делает этот скилл?

Считает по событию $mcp_tool_call долю ошибок, задержки p50/p95 и охват по каждому инструменту, а потом показывает, какие тулы падают или тормозят.

Что нужно, чтобы он заработал?

Подключённый PostHog MCP-сервер с инструментами posthog:execute-sql и posthog:query-mcp-tool-stats, а также события $mcp_tool_call от MCP-серверов, инструментированных SDK MCP-аналитики PostHog.

Похожие скиллы

Все скиллы по теме «Настройка агента: память, контекст, субагенты» →
exploring-llm-clusters PostHog Скилл exploring-llm-clusters исследует кластеры AI- и LLM-трафика в PostHog: сравнивает группы, считает метрики и помогает изучать отдельные трассировки. CX Codex +1 436установок exploring-llm-costs PostHog Скилл exploring-llm-costs для Claude Code разбирает расходы на LLM в PostHog по моделям, пользователям, трассам и другим измерениям. Он подключается к вопросам о скачке затрат и настройке графика или оповещения. CX Codex +1 416установок analyze-data-quality официальный Data Analytics Maintainers Скилл analyze-data-quality проверяет надёжность таблиц и метрик перед анализом или обучением моделей. Помогает найти скрытые дубли и аномалии. CX Codex GP ChatGPT +1 9установок firetiger firetiger Маршрутизирует запросы к платформе наблюдаемости Firetiger: помогает настроить OpenTelemetry, выполнять DuckDB SQL-запросы к трейсам и логам или следить за релизами. CX Codex +1 827установок posthog-analytics alinaqi Скилл posthog-analytics для Claude Code помогает добавить в продукт аналитику PostHog, события и флаги функций. Подключается при работе с отслеживанием действий пользователей. CX Codex +1 827установок adding-analytics spencerpauly Скилл adding-analytics помогает ассистенту внедрить PostHog в веб-приложение: от настройки провайдера до трекинга событий, веб-аналитики и флагов фич. CX Codex +1 410установок

Из того же набора82

Весь набор →
building-workflows Скилл building-workflows помогает создавать, точечно править и тестировать автоматизации PostHog через MCP до их публикации в визуальном редакторе. CX Codex +1 204установок exploring-replay-vision-observations Скилл exploring-replay-vision-observations для Claude Code помогает читать результаты сканеров Replay Vision, находить повторяющиеся проблемы и разбирать записи сессий. Помогает оценить находки и решить, что с ними делать. CX Codex +1 203установок signals-scout-customer-analytics Скилл signals-scout-customer-analytics для Claude Code выявляет снижение и рост вовлечённости аккаунтов PostHog. Отслеживает клиентское здоровье на регулярной основе. CX Codex +1 203установок exploring-mcp-sessions Скилл exploring-mcp-sessions разбирает сессии PostHog MCP: порядок вызова инструментов агентом, его намерения и ошибки при выполнении. CX Codex +1 202установок exploring-mcp-intent-clusters Скилл exploring-mcp-intent-clusters анализирует кластеры намерений MCP-агентов в PostHog, отслеживая распределение вызовов инструментов, ошибки маршрутизации и конкуренцию за задачи. CX Codex +1 202установок managing-reminders Скилл managing-reminders для Claude Code создаёт и ведёт личные напоминания в PostHog: разовые, повторяющиеся и привязанные к ресурсам. CX Codex +1 202установок signals-scout-apm Скилл signals-scout-apm ловит регрессии в трассировках PostHog: доля ошибок и p95 по сервисам, новые сигнатуры ошибок, обрывы трафика. Отчёт пишет, только когда сдвиг подтверждён. CX Codex +1 202установок exploring-mcp-tool-usage Скилл exploring-mcp-tool-usage предлагает вопросы об использовании инструментов MCP-сервера в PostHog и направляет к запросу для выбранного разбора. CX Codex +1 200установок

Спонсоры проекта

Компании, которые помогают держать аналитику открытой