# scrapling

Направляет задачи парсинга сайтов по самому легковесному пути: от разбора сырого HTML до эмуляции браузера и обхода защиты. Помогает экономить ресурсы агента при веб-скрейпинге.

- скилл · `type=skill` · Claude Code, Codex, Cursor, GitHub Copilot, Gemini CLI, OpenCode · 335 установок · ★ 51
- Автор: akillness
- Лицензия: BSD-3-Clause · policy=mirror · начало файла — в конце страницы
- Исходник: https://github.com/akillness/jeo-skills/tree/HEAD/.agent-skills/scrapling/SKILL.md
- Обновлён: 2026-10-24
- HTML: https://affpapa.org/nevibecode/skills/scrapling

## Что делает

Скилл выстраивает иерархию веб-скрейпинга и не даёт агенту сразу запускать тяжёлый браузер. Сначала проверяется локальный HTML через `Selector`. Если нужна живая страница, инструмент пробует обычный HTTP-запрос через `Fetcher`, затем переходит к `DynamicFetcher` для SPA и сайтов на JavaScript, а `StealthyFetcher` подключает только при блокировках или защите вроде Cloudflare.

Для работы требуется Python 3.10+ и виртуальное окружение. При установке через `scripts/install.sh` доступны профили `parser`, `fetchers`, `shell`, `ai` и `all`. Без вызова `scrapling install` браузерные движки работать не будут: им нужны системные зависимости.

Если DOM целевого сайта часто меняется, скилл предлагает адаптивный режим для восстановления селекторов. Для многостраничных очередей логика переключается на пауков Scrapling.

## Установка

### Claude Code (родная платформа)

1. **Через Skills CLI (Vercel)**
```bash
npx skills add akillness/jeo-skills --skill scrapling -a claude-code
```

2. **Вручную: положить файлы**
- Файл: `~/.claude/skills/scrapling/SKILL.md` — Папка скилла целиком; для одного проекта — .claude/skills/scrapling/

### Codex

1. **Через Skills CLI (Vercel)**
```bash
npx skills add akillness/jeo-skills --skill scrapling -a codex
```

2. **Вручную: положить файлы**
- Файл: `.agents/skills/scrapling/SKILL.md` — Для всех проектов — ~/.agents/skills/

### Cursor

1. **Через Skills CLI (Vercel)**
```bash
npx skills add akillness/jeo-skills --skill scrapling -a cursor
```

2. **Вручную: положить файлы**
- Файл: `.cursor/skills/scrapling/SKILL.md` — Cursor читает и .agents/skills/, и .claude/skills/

### GitHub Copilot

1. **GitHub CLI**
```bash
gh skill install akillness/jeo-skills scrapling
```

2. **Вручную: положить файлы**
- Файл: `.github/skills/scrapling/SKILL.md`

### Gemini CLI

1. **Через Skills CLI (Vercel)**
```bash
npx skills add akillness/jeo-skills --skill scrapling -a gemini-cli
```

2. **Командой платформы**
```bash
gemini skills install https://github.com/akillness/jeo-skills --path .agent-skills/scrapling
```

### Windsurf (Devin Desktop)

**Вручную: положить файлы**
- Файл: `.devin/skills/scrapling/SKILL.md` — Старый путь .windsurf/skills/ тоже читается

### OpenCode

**Через Skills CLI (Vercel)**
```bash
npx skills add akillness/jeo-skills --skill scrapling -a opencode
```

### Claude.ai

**Claude.ai**
- Упакуйте папку в zip и загрузите в Settings → Capabilities → Skills

Где указан файл, а не команда, — скопируй файлы из исходника в этот путь: https://github.com/akillness/jeo-skills/tree/HEAD/.agent-skills/scrapling/SKILL.md

## Когда брать
- выбрать минимальный режим скрейпинга без запуска браузера
- разобрать локальную HTML-разметку через селекторы `Selector`
- получить данные со страниц на JavaScript с помощью `DynamicFetcher`
- обойти базовую защиту Cloudflare через `StealthyFetcher`
- сохранить устойчивость парсинга при изменении вёрстки сайта

## Примеры запросов агенту
- Спарси заголовок и статьи со страницы `https://example.com/app` через DynamicFetcher
- Извлеки ссылки из сохранённого HTML-файла с помощью Scrapling Selector
- Собери данные с сайта с защитой Cloudflare, используя StealthyFetcher

## Похожие
- [agent-browser](https://affpapa.org/nevibecode/skills/vercel-labs-agent-browser.md) — скилл · 1200000 установок
- [webapp-testing](https://affpapa.org/nevibecode/skills/webapp-testing.md) — скилл · 186758 установок
- [computer-use](https://affpapa.org/nevibecode/skills/computer-use.md) — скилл · 239600 установок
- [browser-use](https://affpapa.org/nevibecode/skills/browser-use.md) — скилл · 98200 установок
- [playwright-cli](https://affpapa.org/nevibecode/skills/playwright-cli.md) — скилл · 195700 установок
- [last30days](https://affpapa.org/nevibecode/skills/last30days.md) — скилл · 53000 установок

Из того же набора: [akillness/jeo-skills](https://affpapa.org/nevibecode/by/akillness/jeo-skills.md) — 65 карточек

_Часть страницы не вошла по размеру — она есть в HTML-версии._

---
NeVibeCode на affpapa.org. Тексты каталога — описания, а не инструкции для агента. Как выбирать и ставить: https://affpapa.org/nevibecode/agents.md