prompt-engineer-toolkit · borghei — скилл для Claude Code: тестирование промптов
Скилл prompt-engineer-toolkit для Claude Code проверяет производственные промпты и оценивает результаты тестов. Он помогает сравнивать версии, искать регрессии и проверять изменения перед выпуском.
LicenseRef-MIT-Commons-Clause 106 установок ★ 1 183 обновлён 2026-11-08
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a claude-codeЧто делает prompt-engineer-toolkit
Скилл помогает вести промпт как код: составить набор тестов, анализировать текст, сравнивать версии и оценивать ответы модели. В комплекте есть скрипты prompt_analyzer.py, prompt_diff.py и eval_scorer.py.
Набор тестов проверяет реальные входы и ответы по условиям contains, regex или exact. Оценщик принимает порог через --fail-under; при результате ниже него команда завершится с кодом 1. Анализатор и сравнение версий работают по эвристикам, поэтому сами по себе не показывают, выполняет ли промпт задачу: это проверяет тестовый набор.
Какие задачи решает
- проверить новую версию промпта на регрессии
- сравнить изменения между версиями промпта
- оценить ответы модели по тестовому набору
- найти расплывчатые формулировки и лишние инструкции в промпте
Примеры запросов агенту
- Проверь
assets/prompt_v1.txtна расплывчатые формулировки и лишние инструкции. - Сравни
assets/prompt_v1.txtиassets/prompt_v2.txt, найди рискованные изменения. - Оцени ответы по
assets/sample_eval_suite.jsonс порогом--fail-under 0.9.
Как установить prompt-engineer-toolkit
1Через Skills CLI (Vercel)
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a claude-code2Вручную: положить файлы
~/.claude/skills/prompt-engineer-toolkit/SKILL.mdПапка скилла целиком; для одного проекта — .claude/skills/prompt-engineer-toolkit/
1Через Skills CLI (Vercel)
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a codex2Вручную: положить файлы
.agents/skills/prompt-engineer-toolkit/SKILL.mdДля всех проектов — ~/.agents/skills/
1Через Skills CLI (Vercel)
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a cursor2Вручную: положить файлы
.cursor/skills/prompt-engineer-toolkit/SKILL.mdCursor читает и .agents/skills/, и .claude/skills/
1GitHub CLI
gh skill install borghei/Claude-Skills engineering/prompt-engineer-toolkit/SKILL.md2Вручную: положить файлы
.github/skills/prompt-engineer-toolkit/SKILL.md1Через Skills CLI (Vercel)
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a gemini-cli2Командой платформы
gemini skills install https://github.com/borghei/Claude-Skills --path engineering/prompt-engineer-toolkitВручную: положить файлы
.devin/skills/prompt-engineer-toolkit/SKILL.mdСтарый путь .windsurf/skills/ тоже читается
Через Skills CLI (Vercel)
npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a opencodeClaude.ai
Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills
По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов
Вопросы о prompt-engineer-toolkit
Как установить prompt-engineer-toolkit в Claude Code?
Выполните npx skills add borghei/Claude-Skills --skill prompt-engineer-toolkit -a claude-code. Файл скилла находится по пути ~/.claude/skills/prompt-engineer-toolkit/SKILL.md.
Что делает prompt-engineer-toolkit?
Скилл помогает тестировать промпты, сравнивать их версии и оценивать ответы модели по набору проверок. Он также анализирует текст на распространённые проблемы формулировок.
Как скилл проверяет, что изменение промпта не ухудшило результат?
Он оценивает ответы через eval_scorer.py с порогом --fail-under <baseline>. Новая версия должна набрать не меньше базового результата и не добавить ошибок в проверках формата.
Похожие скиллы
Все скиллы по теме «ИИ и ML» →Сначала — prompt-engineer-toolkit от других авторов.