К основному содержанию
скилл CX Codex

autoresearch · pedronauck — скилл для Claude Code: что делает и как установить

Скилл autoresearch прогоняет другой скилл десятки раз, проверяет вывод по бинарным критериям и сам правит промпт, пока оценки не перестанут расти.

лицензия не указана 152 установок ★ 655 обновлён 2026-10-20

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add pedronauck/skills --skill autoresearch -a claude-code
Открыть на GitHub

Что делает autoresearch

Скилл берёт путь к чужому SKILL.md, набор тестовых запросов и 3–6 критериев «да/нет» и запускает цикл: генерирует выводы, сверяет их с критериями, меняет формулировки в промпте, оставляет те правки, что подняли долю прохождений, остальные отбрасывает. Перед первым запуском агент обязан уточнить у пользователя целевой скилл, тестовые сценарии, критерии оценки, число прогонов на эксперимент (по умолчанию 5) и интервал между циклами (по умолчанию 2 минуты) — без этого проверки не начинаются.

До правок агент сначала читает весь SKILL.md и файлы из references/, чтобы понять логику скилла, и только потом формулирует эвалы в формате «вопрос — условие прохождения — условие провала». Первый прогон — это эксперимент №0 без изменений, его результат служит базовой оценкой и сохраняется в SKILL.md.baseline.

Ход экспериментов пишется в results.tsv и results.json, а рядом собирается HTML-дэшборд с графиком роста доли прохождений, таблицей экспериментов и разбивкой по каждому критерию; дэшборд обновляется и открывается в браузере автоматически. Если первый прогон уже даёт около 90%, скилл предлагает спросить пользователя, стоит ли продолжать оптимизацию.

Какие задачи решает

  • найти, какие запросы ломают существующий скилл
  • перевести размытые требования к качеству в проверяемые критерии
  • автоматически подбирать формулировки промпта вместо ручной правки
  • отследить рост качества по экспериментам на графике
  • зафиксировать, какие правки помогли, а какие отбросить

Примеры запросов агенту

  • Запусти autoresearch на скилле ~/.claude/skills/pdf-report/SKILL.md
  • Прогоняй эвалы для этого скилла, пока доля прохождений не выйдет на плато
  • Сделай этот скилл лучше: собери 5 тестовых сценариев и бинарные критерии

Как установить autoresearch

1Через Skills CLI (Vercel)

npx skills add pedronauck/skills --skill autoresearch -a claude-code

2Вручную: положить файлы

~/.claude/skills/autoresearch/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/autoresearch/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Вопросы об autoresearch

Как установить autoresearch в Claude Code?

Выполните npx skills add pedronauck/skills --skill autoresearch -a claude-code, после чего скилл появится в ~/.claude/skills/autoresearch/SKILL.md.

Что делает autoresearch?

Он прогоняет указанный скилл по тестовым входам, оценивает вывод по бинарным критериям «да/нет» и автоматически мутирует промпт, сохраняя только те версии, что повышают долю успешных прохождений.

Что нужно подготовить перед запуском autoresearch?

Точный путь к SKILL.md оптимизируемого скилла, 3–5 разных тестовых сценариев и 3–6 бинарных критериев качества — без них агент не начинает эксперименты.

Похожие скиллы

Все скиллы по теме «Настройка агента: память, контекст, субагенты» →

Сначала — autoresearch от других авторов.

autoresearch официальный luiscantero Скилл autoresearch для GitHub Copilot, который запускает автономный цикл экспериментов над кодом: меняет, тестирует, измеряет метрику и оставляет только улучшения. Работает в git-репозитории с доступом к терминалу. CX Codex +1 3 400установок autoresearch uditgoenka Скилл autoresearch меняет код, проверяет результат по метрике и сохраняет или отбрасывает правку. Также запускает отладку, аудит безопасности и другие задачи через отдельные команды. CX Codex +1 2 700установок autoresearch Yeachan-Heo Скилл autoresearch для Claude Code: крутит цикл правка → эвалюатор → запись в JSON и markdown-лог, пока не сработает явное стоп-условие или потолок max-runtime. CX Codex +1 654установок autoresearch Orchestra Research Скилл autoresearch организует полный цикл автономных научных экспериментов для ИИ-агентов через двухконтурную архитектуру и готовит отчёты. CX Codex +1 1 200установок autoresearch AgriciDaniel Скилл autoresearch для Claude Code запускает ограниченный поиск в Сети, собирает цитируемый отчёт и предлагает слить результаты в хранилище. Выполняет глубокое исследование с проверкой фактов. CX Codex +1 572установок skill-autoresearch akillness Скилл skill-autoresearch прогоняет правки скиллов, промптов и SOP через замороженный локальный бенчмарк: одна правка за прогон, затем оставить или откатить. CX Codex +1 323установок skill-optimizer mcollina Скилл skill-optimizer для Claude Code помогает настроить инструкции других скиллов и проверить, как модели им следуют. Запускается при правке скилл-паков, разборе регрессий и подготовке критериев выпуска. CX Codex +1 1 400установок prompt-optimizer haabe Скилл prompt-optimizer для Claude Code, который A/B-тестирует изменения в CLAUDE.md через eval-бенчмарки. Запускается, когда инструкции агента перестают давать стабильный результат и нужно измерить, какая формулировка лучше. CX Codex +1 ★ 54звёзд репо write-judge-prompt ai-evals-course Скилл write-judge-prompt для Claude Code и Codex. Собирает бинарный оценщик на основе LLM для одного субъективного сбоя: тона, верности ответа, релевантности. Проверяет Pass/Fail по промпту с few-shot примерами и структурированным выводом. CX Codex +1 1 300установок prompt-engineer-toolkit borghei Скилл prompt-engineer-toolkit для Claude Code проверяет производственные промпты и оценивает результаты тестов. Он помогает сравнивать версии, искать регрессии и проверять изменения перед выпуском. CX Codex +1 106установок prompt-governance Alireza Rezvani Скилл prompt-governance помогает выстроить версионирование промптов, настроить пайплайн автоматических эвалов и безопасно выкатывать изменения в продакшен. CX Codex +1 40установок

Из того же набора52

Весь набор →
ship-pr Скилл ship-pr готовит завершённую ветку к сдаче: сверяет документацию, обновляет release notes, делает коммиты и открывает pull request. CX Codex +1 181установок kb-yt-channel Скилл kb-yt-channel для создания тем Karpathy KB из роликов канала: агент получает транскрипты, раскладывает по топикам, проверяет структуру и строит индекс. CX Codex +1 175установок spec-peer-review Скилл spec-peer-review запускает разовую независимую проверку утверждённой спецификации, RFC или PRD. Он готовит список замечаний для отбора пользователем. CX Codex +1 161установок yc-apply Скилл yc-apply помогает готовить, проверять и собирать заявки Y Combinator, заметки для видео основателя и материалы для повторной подачи. CX Codex +1 158установок insta-master Скилл insta-master для Claude Code и Codex: планирование и создание контента Instagram, улучшение профиля, диагностика охвата и проектирование экспериментов роста. CX Codex +1 131установок yt-master Скилл yt-master для YouTube: продумывает идею, заголовок, обложку и сценарий, а когда просмотры просели — разбирает метрику на сопоставимых данных. CX Codex +1 128установок golang-master Скилл golang-master для Claude Code помогает писать и проверять Go-код. Подключается к задачам об ошибках, конкурентности, тестах, производительности и структуре модулей. CX Codex +1 115установок vc-pitch-deck Скилл vc-pitch-deck создаёт, проверяет и правит инвесторские презентации и слайды для Claude Code. Помогает подготовить материалы для рассылки, выступления или демодня. CX Codex +1 102установок

Спонсоры проекта

Компании, которые помогают держать аналитику открытой