К основному содержанию
скилл CX Codex

analyze-results — скилл для Claude Code: разбор результатов

Скилл читает JSON и CSV с результатами экспериментов, строит таблицы сравнения и считает статистику. Пригодится, когда прогонов много и надо понять, что из них следует.

Установить в Claude Code · Через Skills CLI (Vercel) Все способы и платформы ↓
npx skills add wanshuiyin/Auto-claude-code-research-in-sleep --skill analyze-results -a claude-code
Открыть на GitHub

Что делает analyze-results

Скилл проходит по файлам результатов в figures/, results/ или другой папке проекта, разбирает JSON в структурированные данные и собирает таблицу сравнения. В строках — тип модели, гиперпараметры и конфигурация данных, в столбцах — основная метрика и дополнительные, плюс дельта относительно baseline.

Дальше идёт статистика. Если прогонов с разными seed несколько, скилл считает среднее и стандартное отклонение и проверяет воспроизводимость. При переборе параметра он ищет тренд — монотонный, U-образный или с плато — и помечает выбросы. Каждую находку он оформляет по схеме: наблюдение с числами, интерпретация, что это значит для исследовательского вопроса и какой эксперимент проверит догадку.

На выходе — таблица сырых данных, нумерованный список ключевых находок и предложения по следующим экспериментам. Если результаты выглядят значимыми, скилл предложит обновить заметки проекта или отчёт и набросает формулировку вывода в одно-два предложения. Для работы нужны файлы результатов в JSON или CSV: без них анализировать нечего.

Какие задачи решает

  • собрать таблицу сравнения прогонов по метрикам
  • посчитать среднее и стандартное отклонение по нескольким seed
  • найти тренд при переборе гиперпараметра
  • отловить выбросы и подозрительные результаты
  • сформулировать вывод по эксперименту и обновить отчёт

Примеры запросов агенту

  • проанализируй результаты в results/, сравни с baseline
  • посчитай статистику по прогонам с разными seed и проверь воспроизводимость
  • сравни конфигурации моделей и предложи следующие эксперименты

Как установить analyze-results

1Через Skills CLI (Vercel)

npx skills add wanshuiyin/Auto-claude-code-research-in-sleep --skill analyze-results -a claude-code

2Вручную: положить файлы

~/.claude/skills/analyze-results/SKILL.md

Папка скилла целиком; для одного проекта — .claude/skills/analyze-results/

По шагам, с командами для каждой платформы: Как установить скилл в Claude Code: пять способов

Из того же набора78

grant-proposal Собирает черновик грантовой заявки из исследовательских идей и литературы: структура, обоснование бюджета, план работ, формат агентства. CX Codex +1 560установок research-pipeline Организует полный цикл научного исследования от поиска гипотез и запуска экспериментов до вёрстки статьи. Пригодится для автономной работы над академическими публикациями. CX Codex +1 555установок novelty-check Скилл сопоставляет идею исследования со статьями на arXiv и материалами конференций вроде NeurIPS и ICML перед запуском реализации проекта. CX Codex +1 556установок pixel-art Скилл рисует пиксельные SVG-иллюстрации для README, документации и слайдов. Пригодится, когда нужна картинка-герой или милый персонаж без графического редактора. CX Codex +1 548установок experiment-plan Скилл превращает исследовательскую идею в план экспериментов с проверяемыми тезисами, абляциями и порядком запусков. Нужен перед реализацией и написанием статьи. CX Codex +1 544установок auto-paper-improvement-loop Гоняет скомпилированную научную статью по кругу «внешнее ревью → правки → пересборка» два раунда подряд, без вашего участия. CX Codex +1 540установок paper-write Скилл пишет LaTeX-статью по секциям от плана до готового черновика. Пригодится, когда есть план статьи и нужно превратить его в текст. CX Codex +1 539установок formula-derivation Превращает разрозненные уравнения и черновики в связный вывод формул. Помогает упорядочить допущения и зафиксировать шаги в файле DERIVATION_PACKAGE.md. CX Codex +1 532установок

Похожие

results-report Galaxy-Dawn Собирает итоговый отчёт по завершённому эксперименту: что проверили, что подтвердилось, что делать дальше. Работает после скилла results-analysis. CX Codex +1 490установок measure-experiment-results product-on-purpose Оформляет результаты завершённого эксперимента или A/B-теста: статистика, выводы по сегментам и рекомендация ship, iterate или kill. CX Codex +1 742установок results-analysis Galaxy-Dawn Собирает доказательный разбор ML-экспериментов: статистика, графики, отчёт. Пригодится, когда нужно проверить значимость, а не написать текст статьи. CX Codex +1 542установок experiment-code lingzhi227 Пишет и дорабатывает код ML-экспериментов для научной статьи: обучение, оценка, отладка, графики. Пригодится, когда нужно прогнать серию запусков и сравнить результаты. CX Codex +1 1 600установок code-debugging lingzhi227 Скилл структурирует поиск и устранение сбоев в коде научных экспериментов и ML-моделей. Он классифицирует ошибки, ограничивает число правок и фиксирует выводы, чтобы исключить повторные баги. CX Codex +1 1 700установок experiment-pipeline EvoScientist Ведёт исследовательский эксперимент по четырём стадиям с лимитами попыток и условиями перехода. Пригодится, когда базовый результат ещё не воспроизведён, а метод уже хочется проверять. CX Codex +1 389установок

Рядом в теме «ИИ и ML»

Всё по теме «ИИ и ML» →

Вопросы о analyze-results

Как установить analyze-results в Claude?

Выполните npx skills add wanshuiyin/Auto-claude-code-research-in-sleep --skill analyze-results -a claude-code. Скилл окажется в ~/.claude/skills/analyze-results/SKILL.md.

Что делает analyze-results?

Находит файлы результатов экспериментов, строит таблицу сравнения, считает статистику по seed и переборам параметров, а затем формулирует находки и предлагает следующие эксперименты.

Какие файлы нужны скиллу для работы?

Результаты в JSON или CSV. Скилл ищет их в figures/, results/ или другой папке проекта, которую вы укажете в аргументе.

Исходный текст

SKILL.md · MIT
---
name: analyze-results
description: Analyze ML experiment results, compute statistics, generate comparison tables and insights. Use when user says "analyze results", "compare", or needs to interpret experimental data.
argument-hint: "[results-path-or-description]"
allowed-tools: Bash(*), Read, Grep, Glob, Write, Edit
---

# Analyze Experiment Results

Analyze: $ARGUMENTS

## Workflow

### Step 1: Locate Results
Find all relevant JSON/CSV result files:
- Check `figures/`, `results/`, or project-specific output directories
- Parse JSON results into structured data

### Step 2: Build Comparison Table
Organize results by:
- **Independent variables**: model type, hyperparameters, data config
- **Dependent variables**: primary metric (e.g., perplexity, accuracy, loss), secondary metrics
- **Delta vs baseline**: always compute relative improvement

### Step 3: Statistical Analysis
- If multiple seeds: report mean +/- std, check reproducibility
- If sweeping a parameter: identify trends (monotonic, U-shaped, plateau)
- Flag outliers or suspicious results

### Step 4: Generate Insights
For each finding, structure as:
1. **Observation**: what the data shows (with numbers)
2. **Interpretation**: why this might be happening
3. **Implication**: what this means for the research question
4. **Next step**: what experiment would test the interpretation

### Step 5: Update Documentation
If findings are significant:
- Propose updates to project notes or experiment reports
- Draft a concise finding statement (1-2 sentences)

## Output Format
Always include:
1. Raw data table
2. Key findings (numbered, concise)
3. Suggested next experiments (if any)

© wanshuiyin · MIT · wanshuiyin/Auto-claude-code-research-in-sleep

Смотрите также

Спонсоры проекта

Компании, которые помогают держать аналитику открытой