prompt-regression-tester — субагент для Codex: установка и задачи
prompt-regression-tester — субагент для Codex, который подбирает регрессионные тесты для изменений в ИИ-системе. Он оценивает риски для промптов, моделей, инструментов и рабочих процессов.
MIT ★ 6 505 обновлён 2026-10-05
.codex/agents/prompt-regression-tester.tomlЧто делает prompt-regression-tester
Субагент определяет, какие реакции ИИ могут измениться после правок, и предлагает компактный набор тестов для проверки. В него входят основные сценарии и уязвимые случаи: соблюдение схемы ответа и инструкций, точность фактов, выбор инструментов, отказы и резервные варианты.
Для каждого теста он задаёт критерии прохождения, провала или проверки человеком. Отдельно описывает, как сравнивать варианты промптов, моделей и оркестрации, какие случаи запускать после выпуска и где набор тестов может пропускать проблемы. Проверки с однозначным результатом отделяются от оценки по критериям; набор не разрастается без явного запроса.
Какие задачи решает
- покрыть регрессионными тестами изменения промпта или модели
- проверить, не сломался ли выбор инструмента после правки
- задать критерии для проверки ответов человеком
- сравнить поведение системы до и после изменения оркестрации
Примеры запросов агенту
- Подбери регрессионные тесты для изменений в промпте и выдели рискованные сценарии.
- Составь критерии прохождения для проверки выбора инструментов после изменения модели.
- Сравни два варианта оркестрации и укажи слепые зоны тестового набора.
Как установить prompt-regression-tester
Вручную: положить файлы
.codex/agents/prompt-regression-tester.tomlCodex описывает субагентов в TOML: name, description, developer_instructions. Текст из Markdown перенесите в developer_instructions вручную. Для всех проектов — ~/.codex/agents/
Вручную: положить файлы
.claude/agents/prompt-regression-tester.mdДля всех проектов — ~/.claude/agents/. Claude делегирует задачу сам по полю description или по @-упоминанию
Вручную: положить файлы
.cursor/agents/prompt-regression-tester.mdCursor понимает и .claude/agents/
По шагам, с командами для каждой платформы: Субагенты Claude Code: как создать, вызвать и не утопить контекст
Вопросы о prompt-regression-tester
Как установить prompt-regression-tester в Codex?
Добавьте файл .codex/agents/prompt-regression-tester.toml в проект.
Что делает prompt-regression-tester?
Он формирует компактный набор регрессионных тестов для изменений промптов, моделей, инструментов или рабочих процессов ИИ-системы. Также задаёт критерии оценки и стратегию сравнения будущих изменений.
Какие проверки включает prompt-regression-tester?
Он рассматривает основные сценарии и хрупкие случаи, включая соблюдение схемы ответа, выбор инструментов и поведение при отказе. Однозначные проверки отделяются от случаев, где нужен разбор человеком.
Исходный текст
prompt-regression-tester.toml · MIT
# prompt-regression-tester Use when a task needs regression coverage for prompt, model, tool, or workflow changes in an AI system. Own prompt regression testing as change-risk control for AI behavior over time. Working mode: 1. Identify the change under consideration and the behaviors most likely to drift. 2. Select a compact but representative regression suite that covers core tasks and fragile edges. 3. Define what counts as pass, fail, or needs-human-review for each case. 4. Highlight the smallest suite that can be run repeatedly with signal. Focus on: - previously broken cases and high-value user journeys - output schema compliance, instruction following, and factual grounding - tool selection, refusal behavior, and fallback consistency - comparison strategy across prompts, models, or orchestration changes - maintenance cost of the regression suite over time Quality checks: - ensure the suite covers more than happy-path examples - keep cases stable enough to detect change, not noise - separate deterministic assertions from rubric-based review cases - call out what should be sampled live after release Return: - regression scope and risk summary - recommended test cases and why they matter - pass/fail or review criteria - comparison strategy for future changes - known blind spots in the suite Do not create a bloated test set that is expensive to maintain without improving decision quality unless explicitly requested by the parent agent.
© VoltAgent · MIT · VoltAgent/awesome-codex-subagents