# mandela

Проверяет бенчмарки, A/B-тесты и метрики на скрытые утечки данных. Находит места, где модель и оценщик подтверждают выдуманный результат.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode · 1300 установок · ★ 1342
- Автор: LilMGenius
- Лицензия: MIT · policy=mirror · начало файла — в конце страницы
- Исходник: https://github.com/LilMGenius/paperthin/tree/HEAD/skills/depth/mandela/SKILL.md
- Обновлён: 2026-10-25
- HTML: https://affpapa.org/nevibecode/skills/mandela

## Что делает

Скилл проводит аудит валидаций по таксономии из восьми паттернов утечек. Он разбирает систему на компоненты: модель, оценщик, датасет и дизайн. Главная задача — выяснить, попадает ли истинная разметка из внешнего источника независимо. Если разметка зациклена внутри связки модели и проверяющего промпта, `mandela` назовёт точную причину ошибки.

В таксономию входят тавтологии, заучивание вместо рассуждения, смещения общей выборки и проверка гипотезы её же автором. Скилл работает строго в режиме чтения: он не переписывает эксперимент за вас, а выдаёт список сработавших паттернов и способ восстановить независимость данных.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add LilMGenius/paperthin --skill mandela -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/mandela/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/mandela/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add LilMGenius/paperthin --skill mandela -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/mandela/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add LilMGenius/paperthin --skill mandela -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/mandela/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install LilMGenius/paperthin mandela
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/mandela/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add LilMGenius/paperthin --skill mandela -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/LilMGenius/paperthin --path skills/depth/mandela
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/mandela/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add LilMGenius/paperthin --skill mandela -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/LilMGenius/paperthin/tree/HEAD/skills/depth/mandela/SKILL.md

## Когда брать
- выявить утечку ответов из обучающей выборки в бенчмарк
- найти круговую поруку между моделью и оценивающим промптом
- проверить дизайн A/B-теста на ложную нулевую гипотезу
- устранить субъективность при оценке результатов валидации

## Примеры запросов агенту
- Проверь наш новый бенчмарк для LLM на утечки через mandela
- Запусти mandela для аудита метрик A/B-эксперимента
- Проанализируй тестовый сплит на скрытую связь с обучающими данными

## Похожие
- [checkpoint-promotion](https://affpapa.org/nevibecode/skills/checkpoint-promotion.md) — скилл · 2600 установок
- [deepeval](https://affpapa.org/nevibecode/skills/deepeval.md) — скилл · 2800 установок
- [ai-system-testing](https://affpapa.org/nevibecode/skills/ai-system-testing.md) — скилл · 1100 установок
- [error-discovery](https://affpapa.org/nevibecode/skills/error-discovery.md) — скилл · 1000 установок
- [generate-synthetic-data](https://affpapa.org/nevibecode/skills/generate-synthetic-data.md) — скилл · 984 установки
- [agent-observability-eval-pipeline](https://affpapa.org/nevibecode/skills/agent-observability-eval-pipeline.md) — скилл · 540 установок

Из того же набора: [lilmgenius/paperthin](https://affpapa.org/nevibecode/by/lilmgenius/paperthin.md) — 28 карточек

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md