К основному содержанию
скилл CX Codex

evaluation-rubrics — скилл для Claude Code: критерии и шкалы оценки

Помогает собрать рубрику с критериями, шкалой и описанием уровней, чтобы оценивать работу одинаково при повторных проверках.

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add lyndonkl/claude --skill evaluation-rubrics -a claude-code
Открыть на GitHub

Что делает evaluation-rubrics

Скилл ведёт агента по шести шагам: определить цель и охват оценки, выбрать критерии, спроектировать шкалу, написать описания уровней, откалибровать рубрику на примерах и потом дорабатывать её по ходу использования. Внутри есть шаблоны для каждого шага и файл методологии со шкалами и калибровкой.

Критерии берутся наблюдаемые, а не оценочные: не «хороший подход», а то, что два независимых проверяющих оценят одинаково. Шкалу скилл советует держать в пределах 1–4 или 1–5, а описания уровней писать так, чтобы соседние уровни отличались конкретно. Критериев обычно 4–8.

Отдельно разобраны пять схем: аналитическая рубрика по критериям, целостная с одной оценкой, однопунктная с пометками выше и ниже нормы, бинарный чек-лист и рубрика под стандарты. Для калибровки нужны несколько проверяющих на одних и тех же работах — если они расходятся, описания уровней придётся переписать.

Какие задачи решает

  • собрать рубрику для оценки текстов или кода с явными критериями
  • сравнить несколько вариантов решения по одной шкале
  • задать порог приёмки для pull request или статьи
  • снизить разброс оценок между несколькими проверяющими
  • переписать описания уровней, которые слишком похожи друг на друга

Примеры запросов агенту

  • Составь рубрику на 1–5 для оценки технических статей: точность, ясность, практическая польза, оригинальность
  • Оцени эти два варианта архитектуры по одной рубрике и покажи, где они расходятся
  • Проверь мою рубрику для код-ревью: критерии наблюдаемые, уровни различимы?

Как установить evaluation-rubrics

1Через Skills CLI (Vercel)

npx skills add lyndonkl/claude --skill evaluation-rubrics -a claude-code

2Вручную: положить файлы

~/.claude/skills/evaluation-rubrics/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/evaluation-rubrics/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы о evaluation-rubrics

Как установить evaluation-rubrics в Claude?

Выполните npx skills add lyndonkl/claude --skill evaluation-rubrics -a claude-code. Скилл окажется в ~/.claude/skills/evaluation-rubrics/SKILL.md.

Что делает evaluation-rubrics?

Проводит через разработку рубрики: цель, критерии, шкала, описания уровней, калибровка. На выходе — таблица, по которой работу оценивают одинаково при повторных проверках.

Чем аналитическая рубрика отличается от целостной?

Аналитическая разбивает оценку по критериям и даёт разбор слабых мест, но её дольше составлять. Целостная ставит одну общую оценку — быстрее, но конкретных замечаний по критериям не даёт.

Похожие скиллы

Все скиллы по теме «Настройка агента: память, контекст, субагенты» →
scholar-evaluation K-Dense-AI Скилл проводит качественный развивающий разбор научных черновиков и протоколов с привязкой к источникам. Помогает проверить рубрики оценки без метрик престижа. CX Codex +1 2 100установок agent-evaluation mlflow Скилл для системной оценки LLM-агентов через MLflow: датасеты, скореры, трейсинг. Пригодится, когда агент ошибается с выбором инструментов или даёт неполные ответы. CX Codex +1 1 100установок llm-evaluation Seth Hobson Скилл для оценки качества LLM-приложений: автоматические метрики, человеческая разметка, LLM-as-judge и бенчмарки. Пригодится, когда нужно сравнить модели или поймать регрессию до деплоя. CX Codex 12 755установок self-eval Alireza Rezvani Скилл оценивает работу ИИ по двум осям, проверяет завышение баллов и сохраняет историю оценок. Подходит после задачи, ревью или рабочей сессии. 575установок code-review jwynia Скилл задаёт структуру ревью: что проверять в корректности, безопасности и производительности, как писать комментарии и когда PR слишком большой. CX Codex +1 498установок code-review-and-quality addyosmani Пять осей проверки и лимиты на размер диффа: скилл держит правки в форме, которую можно отревьюить за один заход. CX Codex +1 73 200установок

Из того же набора5

Спонсоры проекта

Компании, которые помогают держать аналитику открытой